Etapa 1: carga de datos y preprocesamiento
El archivo que se adjunta consiste en un corpus de unas 7.000
noticias scrapeadas entre julio y septiembre de 2019 de los siguientes
medios de circulación nacional:
Télam La Nación Clarín Perfil Infobae MinutoUno Página 12
Constituye una muestra aleatoria del corpus construido por Florencia
Piñeyrúa para su tesina de grado “Procesamiento del lenguaje natural
aplicado al estudio de tópicos de noticias de seguridad en Argentina:
julio a septiembre 2019”. Una exposición más concentrada de sus
resultados puede encontrarse en el siguiente artículo.
El corpus contiene las siguientes variables:
id : identificador de cada documento
url : link a la noticia original
fecha : fecha de publicación
anio : año de publicación
mes : mes de publicación
dia : dia de publicación
medio : medio en el que fue publicado
orientacion: clasificación -provisoria- de los medios según su línea
editorial predominante (más conservador, más progresista, neutral)
titulo
texto
Carga dataset
corpus_base <- read_csv("M5_corpus_medios.csv")
Rows: 7000 Columns: 10── Column specification ──────────────────────────────────────────────────────────
Delimiter: ","
chr (5): url, medio, orientacion, titulo, texto
dbl (4): id, anio, mes, dia
date (1): fecha
ℹ Use `spec()` to retrieve the full column specification for this data.
ℹ Specify the column types or set `show_col_types = FALSE` to quiet this message.
# En este apartado vemos cuántas noticias aporta cada medio al corpus y calculamos la proporción sobre el total.
corpus_base %>%
group_by(medio) %>%
summarise(n=n()) %>%
mutate(
total = sum(n),
prop = n/total*100
) %>%
ungroup() %>%
select(medio, n, prop) %>%
arrange(desc(n))
Normalización y tokenización
corpus_tidy <- corpus_base %>%
mutate(texto= stringi::stri_trans_general(texto, "Latin-ASCII"),
titulo = stringi::stri_trans_general(titulo, "Latin-ASCII")) %>%
mutate(texto = str_replace_all(texto, '[[:digit:]]+', '')) %>%
unnest_tokens(word, texto, to_lower = TRUE)
# En este este código tomamos el corpus de texto "corpus_base", lo normalizamos convirtiendo el texto y el título a caracteres ASCII, eliminamos los dígitos del texto y finalmente los dividimos en tokens para su posterior análisis.
Eliminar stopwords
stop_words_1 <- read_csv('https://raw.githubusercontent.com/Alir3z4/stop-words/master/spanish.txt', col_names=FALSE) %>%
rename(word = X1) %>%
mutate(word = stringi::stri_trans_general(word, "Latin-ASCII"))
Rows: 608 Columns: 1── Column specification ──────────────────────────────────────────────────────────
Delimiter: ","
chr (1): X1
ℹ Use `spec()` to retrieve the full column specification for this data.
ℹ Specify the column types or set `show_col_types = FALSE` to quiet this message.
# En este código leemos un archivo CSV de stop words en español ubicado en la URL especificada, renombramos la columna a "word" y luego transformamos las palabras en la columna para asegurarnos de que estén en formato ASCII. El resultado final es un dataframe llamado "stop_words_1" que contiene la lista de stopwords normalizadas.
stop_words_2 <- read_csv("z_stopwords.txt", col_names = FALSE) %>%
rename(word = X1) %>%
mutate(word=stringi::stri_trans_general(word, "Latin-ASCII"))
Rows: 732 Columns: 1── Column specification ──────────────────────────────────────────────────────────
Delimiter: ","
chr (1): X1
ℹ Use `spec()` to retrieve the full column specification for this data.
ℹ Specify the column types or set `show_col_types = FALSE` to quiet this message.
# Ídem pero el archivo CSV llamado "z_stopwords.txt" se carga desde la carpeta.
stop_words_full <- stop_words_1 %>%
bind_rows(stop_words_2) %>%
distinct()
# En este paso combinamos los dos dataframes de stopwords, eliminamos las filas duplicadas y guardamos el resultado en un nuevo dataframe llamado "stop_words_full". Este dataframe contiene la lista completa y única de stopwords normalizadas.
corpus_tidy <- corpus_tidy %>%
anti_join(stop_words_full)
Joining with `by = join_by(word)`
# En este código eliminamos las stopwords del corpus de texto "corpus_tidy" utilizando la lista de stopwords contenida en el dataframe "stop_words_full". Este paso en el procesamiento de texto es necesario para eliminar palabras que no aportan significado para el análisis posterior.
Corrección “años”
corpus_tidy <- corpus_tidy %>%
mutate(word = case_when(
word == 'ano' ~ 'anio',
word == 'anos' ~ 'anio',
TRUE ~ word
))
# PROBÉ UN MONTÓN DE ALTERNATIVAS, PERO EL CÓDIGO DE LA LEMATIZACIÓN SIGUE SIN FUNCIONAR (FIJATE QUE EL ELEMENTO CORPUS_TIDY_LEMM DUPLICA LAS MIMAS PALABRAS EN LA ÚLTIMA COLUMNA). ENTIENDO QUE PUEDE SER UN TEMA DEL DICCIONARIO QUE SE USA, PERO CON OTRAS OPCIONES TAMPOCO ME FUNCIONA
corpus_tidy_lemm <- corpus_tidy %>%
mutate(word_lemmatized = lemmatize_words(word, language = "es"))
corpus_tidy_lemm %>%
filter(word != word_lemmatized) %>%
select(word, word_lemmatized)
Etapa 2: Consignas
¿Cuáles son las palabras más utilizadas en cada uno de los medios?
¿Pueden verse diferencias? (Tener en cuenta las diferentes métricas
trabajadas en el curso: tf, tf-idf, etc.) Generar las visualizaciones
que considere más pertinentes para responder la pregunta.
Exploración palabras más frecuentes
Comenzamos explorando el corpus en formato tidy para identificar
rápidamente algunos de los términos más frecuentes por medio.
corpus_tidy %>%
group_by(word, medio) %>%
summarise(n=n()) %>%
arrange(desc(n))
`summarise()` has grouped output by 'word'. You can override using the `.groups` argument.
# Mediante este código agrupamos las palabras únicas en el corpus, contamos el número de ocurrencias de cada palabra y las ordenamos en función de su frecuencia de aparición, mostrando primero las palabras más frecuentes.
corpus_tidy %>%
filter(medio == 'infobae') %>%
group_by(word) %>%
summarise(n=n()) %>%
arrange(desc(n))
# Mirada rápida a las palabras más frecuentes de algunos medios
corpus_tidy %>%
group_by(medio, word) %>%
summarise(n=n()) %>%
arrange(desc(n)) %>%
pivot_wider(names_from = medio,
values_from = n)
`summarise()` has grouped output by 'medio'. You can override using the `.groups` argument.
# Este código calcula el recuento de ocurrencias de cada palabra en el corpus de texto agrupado según el medio de comunicación, y luego reorganiza estos resultados en un formato más ancho donde cada medio tiene sus recuentos de ocurrencias asociados para cada palabra.
word_counts_10 <- corpus_tidy %>%
group_by(medio, word) %>%
summarise(n=n()) %>%
slice_max(n, n = 10) %>%
ungroup()
`summarise()` has grouped output by 'medio'. You can override using the `.groups` argument.
# En este paso calculamos el recuento de ocurrencias de cada palabra en el corpus, agrupadas por la columna "medio", y almacena estos recuentos en un nuevo dataframe llamado "word_counts" para pasarle a la función de graficado.
word_counts_all_10 <- corpus_tidy %>%
group_by(word) %>%
summarise(n=n()) %>%
slice_max(n, n = 10) %>%
ungroup() %>%
mutate(medio = 'general')
# Aquí calculamos el recuento de ocurrencias de cada palabra en el corpus, sin agrupar por medio. Luego, seleccionamos las 10 palabras más comunes en todo el corpus. A estos resultados les agregamos la etiqueta "general" en la columna "medio" para poder comparar visualmente la distribución general con la distribución por medio
word_counts_top_10 <- word_counts_10 %>%
bind_rows(word_counts_all_10)
# Unifico en un dataset
A continuación creamos una función para automatizar todas las
visualizaciones relacionadas a las métricas del corpus. COMENTARIO:
CUÁLES SERÍAN LAS MÉTRICAS? EN TODO CASO, HASTA NO APARECE UNA SOLA
MÉTRICA? (LA FRECUENCIA)
crear_graf_words <- function(data) {
medios <- unique(data$medio)
graficos <- list()
for (medio_actual in medios) {
datos_medio <- data %>%
filter(medio == medio_actual) %>%
mutate(word = fct_reorder(word, n))
grafico <- ggplot(datos_medio, aes(n, word)) +
geom_col() +
geom_text(aes(label = n), position = position_stack(vjust = 0.5), family = "Courier", color = "white") +
labs(title = medio_actual,
x = "Frecuencia",
y = "Palabra") +
theme_classic()+
theme(plot.title = element_text(hjust= 0.5),
axis.title = element_blank(),
axis.ticks.x = element_blank(),
text = element_text(family = "Courier"))
graficos[[medio_actual]] <- grafico
}
wrap_plots(graficos)
}
# Esta función crea para cada medio un gráfico con el top 10 de palabras según cada métrica analizada
El eje x muestra las palabras y el eje y muestra la frecuencia de
cada palabra. El gráfico está segmentado en paneles por cada medio, y
las escalas del eje y se ajustan para cada panel individual.
crear_graf_words(word_counts_top_10)

# Este código genera una visualización de las palabras más comunes en el corpus, desglosadas por medio y en general. Las palabras más comunes se muestran en orden descendente de frecuencia en cada categoría.
Algunas observaciones preliminares:
Clarín e Infobae aportan cada uno el 22% de las noticias al
corpus. El peso de las palabras más importantes para estos medios en el
ranking general es alto.
Año parece una stopword porque es una palabra que presenta una
frecuencia alta intra e inter medios.
Crónica, LN e Infobae son los únicos que no incluyen nombres
propios entre las palabras más frecuentes.
En LN hay muchas referencias a redes sociales y acciones en ellas
(guardar, compartir). Las acciones y “fuente” podrían ser stopwords.
Incluso las menciones a RRSS podrían ser producto del scrapping y no del
contenido de las notas. COMENTARIO: ESTO PARECERÍA SER ASÍ, NO? DIGO,
QUE TAL VEZ SEA LA RESPUESTA QUE SE BUSCA, LA CORRECTA, PORQUE EN
DEFINITIVA SE APLICARON LOS MISMOS CÓDIGOS A TODOS LOS MEDIOS. ENTONCES,
SEGURAMENTE SEA COMO DECÍS, UN ERROR DEL SCRAPPING. COMENTARIO LUEGO DEL
V2: YA QUEDÓ CORREGIDO EL CASO DE LN, PERO NO ENTIENDO CÓMO JAJA (DIGO,
TENIENDO EN CUENTA EL COMENTARIO ANTERIOR QUE HICE).
Macri aparece como el político más nombrado. Lógicamente, es un
resultado esperable si se tiene en cuenta que las notas relevadas
corresponden al último año de su gobierno.
Infobae y sobre todo Crónica parecen cubrir temas más generales
que los demás medios, al incluir palabras como “polícía”, “ciudad”,
“mujer”, “hombre”, “casa”, “personas”, “mundo”, “vida”. Incluso, la
frecuencia de la palabra “policía” en Crónica (#2 o #1 si se excluye el
término “anio”) podría indicar que la mayor parte de la cobertura de
este medio se orienta a la temática policial. De todas formas, en el top
10 también aparecen palabras como “gobierno” y “presidente”.
La palabra “frente” aparece con frecuencia en varios medios, lo
que nos inclina a corroborar si refiere a frentes electorales o
simplemente a un adverbio de lugar y, en este caso, debería considerarse
como stopword.
A modo de síntesis, podría advertirse que las palabras con mayor
frecuencia de aparición en la totalidad de los medios se corresponden
con la temática política. Es probable que esta vinculación sea un
desprendimiento del escenario electoral que signó el período bajo
análisis.
Term Frequency - TF:
A modo de práctica generamos el cálculo de term frequency manualmente
para visualizar la distribución de términos según su frecuencia respecto
al total de términos, aperturado por medio.
# La "term frequency" (frecuencia de término) es una métrica para evaluar la importancia de una palabra en un documento o corpus de documentos, a partir de la medición de la frecuencia de su aparición en comparación con el número total de palabras.
words_tidy <- corpus_tidy %>%
group_by(medio, word) %>%
summarise(n=n()) %>%
arrange(desc(n))
`summarise()` has grouped output by 'medio'. You can override using the `.groups` argument.
total_words <- words_tidy %>%
group_by(medio) %>%
summarize(total = sum(n))
words_tidy <- words_tidy %>%
left_join(total_words) %>%
ungroup() %>%
arrange(desc(n))
Joining with `by = join_by(medio)`
# En este código contamos la frecuencia de cada palabra en el corpus del medio y también el total de palabras en el medio. Con estos datos podemos calcular a continuación la importancia de cada término en el medio.
En esta visualización podemos interactuar para identificar la
cantidad de términos por tf:
Idea–> agregar dato de términos totales por medio para
comprender qué peso tiene cada línea de tf/count de términos en cada
corpus.
tf_viz <- words_tidy %>% mutate(tf = n/total) %>%
ggplot(aes(tf)) +
geom_histogram(show.legend = FALSE) +
coord_flip()+
xlim(NA, 0.0002) +
facet_wrap(~medio) +
theme_classic()+
theme(plot.title = element_text(hjust= 0.5),
axis.title = element_blank(),
axis.ticks.x = element_blank(),
text = element_text(family = "Courier"))
ggplotly(tf_viz)
`stat_bin()` using `bins = 30`. Pick better value with `binwidth`.Warning: Removed 6859 rows containing non-finite values (`stat_bin()`).
Vemos que para los medios más masivos se cumple la Ley de Zipf: pocas
palabras ocurren muchas veces. Los corpus de Crónica, Minuto Uno y Télam
tienen menos términos que los demás y la tf tiene un rango menor (uso de
palabras mejor distribuido).
Term Frequency - Inverse Document Frequency (TF-IDF)
En esta etapa complementamos el análisis con las métricas de idf y
tf_idf, para obtener una medida más completa de la importancia de los
términos en el corpus de documentos.
tf_idf <- words_tidy %>%
bind_tf_idf(word, medio, n)
tf_idf %>% select(-total) %>%
arrange(desc(tf_idf))
# En este código calculamos las métricas tf, idf y tf_idf para todos los términos del corpus
Creamos tres dataset, uno por métrica, con el top ten de términos
para pasarle a la función de visualización.
tf_10 <- tf_idf %>%
group_by(medio) %>%
slice_max(tf, n = 10) %>%
select(medio, word, tf) %>%
rename(n = tf) %>%
mutate(n = log(n + 1) * 100) %>%
mutate(n = round(n, 4))
idf_10 <- tf_idf %>%
group_by(medio) %>%
arrange(desc(idf)) %>%
slice_head(n = 10) %>%
select(medio, word, idf) %>%
rename(n = idf) %>%
mutate(n = log(n + 1) * 100) %>%
mutate(n = round(n, 4))
tf_idf_10 <- tf_idf %>%
group_by(medio) %>%
arrange(desc(idf)) %>%
slice_head(n = 10) %>%
select(medio, word, tf_idf) %>%
rename(n = tf_idf) %>%
mutate(n = log(n + 1) * 100) %>%
mutate(n = round(n, 4))
Pasamos cada uno de los top ten de términos por la función de
graficado para visualizar los términos más importantes según cada
métrica.
crear_graf_words(tf_10)

crear_graf_words(idf_10)

crear_graf_words(tf_idf_10)

Análisis preliminar de TF-IDF:
En primer lugar identificamos la necesidad de agregar palabras al
listado de stopwords. Entendemos que no aportan información sobre el
contenido u orientación de las noticias y a su vez son únicos para
algunos medios y eso genera un alto tf_idf.
Ejemplos: jpe, ap, emj, cronica.com.ar, fvazquez, cronicavirales, hd,
pemex, gt, afv, jpg, minutouno.com, ambito.com, ivanovich, loading,
paginai, protected, lxs, email, r.c,cp, fel,l.l,d.s, ea, f.f, f.d.s, fh,
a.g, pct, telam.la, nacional.el
Podemos identificar “firmas” de periodistas (nombres de usuario o
siglas) que tampoco son informativas sobre el contenido del
corpus.
Etapa 1.2: Ampliación stopwords y reprocesamiento de la base
El análisis realizado nos permitió encontrar numerosas palabras
incluidas en el corpus que creemos son producto del scrapping. Previo a
la modelización para identificar tópicos creemos pertinente ampliar el
listado de stopwords y repetir el preprocesamiento de los datos.
COMENTARIO: EN REALIDAD, ESAS NUEVAS “STOPWORDS” NO TENDRÍAN MÁS QUE VER
CON EL HECHO DE QUE SON TÉRMINOS MUY ESPECÍFICOS QUE NO FIGURAN EN LOS
DICCIONARIOS QUE SE USAN PARA LIMPIAR LAS STOPWORDS?
Para ampliar el listado de stopwords partimos del listado de palabras
con sus métricas de tf e idf.
# Mediante el siguiente código eliminamos palabras que incluyen puntos y parecen producto de scrapping web. COMENTARIO: ACÁ ME PERDÍ UN POCO: ESTA LIMPIEZA DE PUNTOS NO ESTABA HECHA EN LOS PRIMEROS PASOS DEL TP?
nuevas_stopwords_1 <- tf_idf %>%
select(word) %>%
filter(grepl('\\.', word)) %>%
pull(word)
# En este paso eliminamos palabras de dos caracteres, salvo contadas excepciones que tienen sentido.
nuevas_stopwords_2 <- tf_idf %>%
select(word) %>%
filter(str_length(word) == 2 & !(word %in% c('pj', 'fe', 'dt', 'tv', 'km', 'cv', 'dr', 'it', 'dj', 'ux'))) %>%
pull(word)
# Este código elimina palabras de tres caracteres. Parece haber más siglas y palabras cortas que tienen sentido pero, dada la gran cantidad de stopwords de 3 caracteres, hay motivos para incluir este paso.
nuevas_stopwords_3 <- tf_idf %>%
select(word) %>%
filter(str_length(word) == 3 & !(word %in% c('san', 'mil', 'ley', 'afp', 'sur', 'fmi', 'usd', 'rio', 'gol', 'paz', 'mar', 'oro', 'red', 'luz', 'voz' , 'rol', 'sol', 'gas', 'pie', 'par', 'pro', 'via', 'onu', 'ypf', 'iva', 'afa', 'pbi', 'bar', 'cfk', 'eje', 'rey', 'atp', 'don', 'fbi', 'gay', 'psg', 'uba', 'ucr', 'ceo', 'ong', 'fed', 'ojo', 'dea', 'uva', 'cgt', 'ufi', 'app', 'gil', 'vih', 'nba', 'bbc', 'evo', 'hip', 'hop', 'fox', 'nbc', 'rap', 'adn', 'ala', 'eva', 'pan', 'zen', 'afv', 'cck', 'eco', 'oca', 'tio', 'cnn', 'cia', "dni", "uia", "fdt", "uif", "hbo", "mls", "oea", "mep", "gnc", "auh", "che", "oil", "gen", "agn", "fpv", "lam", "pib", "cne","duo", "vox", "dow", "uca", "dnu", "pez", "pfa", "pdt", "fda", "fci", "oms", "psa", "feo", "cta", "ego",
"faa", "ute", "ate", "lio", "fpt", "suv", "gba", "izq", "aro", "smn", "tnt", "uco", "ipc", "saa", "tmz", "ccl", "gel", "vip", "esi", "res", "kun", "tsj", "afi", "pts", "cnh", "ajo", "acv", "bmw", "bus", "gps", "ile", "ios", "unc", "zoo", "jup", "tos", "unl", "upl", "zeo", "ave", "mte", "mpn", "apn", "mao", "pba", "sms", "cnv", "mdz", "fol", "iso"))) %>%
pull(word)
nuevas_stopwords <- data.frame(word = nuevas_stopwords_1) %>%
bind_rows(data.frame(word = nuevas_stopwords_2)) %>%
bind_rows(data.frame(word = nuevas_stopwords_3))
stop_words_full_v2 <- stop_words_full %>%
bind_rows(tibble(word = c('embed', 'anio', 'ano', 'anos', 'gusta', 'twitter', 'facebook', 'comentar', 'fuente', 'whatsapp', 'guardar', 'compartir', 'mail', 'loading', 'email', 'paginai', 'eltrece', 'infobae' ))) %>%
bind_rows(nuevas_stopwords)
A partir de la nueva lista de stopwords, recreamos el corpus en
formato tidy y también el dataframe en formato medio/término/n para
continuar con el análisis de métricas.
corpus_tidy_v2 <- corpus_tidy %>%
anti_join(stop_words_full_v2)
Joining with `by = join_by(word)`
words_tidy_v2 <- corpus_tidy_v2 %>%
group_by(medio, word) %>%
summarise(n=n())
`summarise()` has grouped output by 'medio'. You can override using the `.groups` argument.
total_words_v2 <- words_tidy_v2 %>%
group_by(medio) %>%
summarize(total = sum(n))
words_tidy_v2 <- words_tidy_v2 %>%
left_join(total_words_v2) %>%
ungroup() %>%
arrange(desc(n))
Joining with `by = join_by(medio)`
Revisión de métricas
Creamos el gráfico con la distribución de términos según su tf para
identificar variaciones respecto a la v1.
tf_viz_v2 <- words_tidy_v2 %>% mutate(tf = n/total) %>%
ggplot(aes(tf)) +
geom_histogram(show.legend = FALSE) +
coord_flip()+
xlim(NA, 0.0002) +
facet_wrap(~medio) +
theme_classic()+
theme(plot.title = element_text(hjust= 0.5),
axis.title = element_blank(),
axis.ticks.x = element_blank(),
text = element_text(family = "Courier"))
ggplotly(tf_viz_v2)
`stat_bin()` using `bins = 30`. Pick better value with `binwidth`.Warning: Removed 6948 rows containing non-finite values (`stat_bin()`).
-> falta comparar y análisis respecto a tf en v1. Comparar
cuántos terminos caen en la tf más cercana a 0 (terminos con baja
importancia en el corpus). A su vez, al quitar más stopwords deberíamos
ver menos términos cayendo en las tf más altas por ser palabras random
que aparecen pocas veces en el corpus
No se observan variaciones significativas entre v1 y v2 (ESTO LO
DIGO A OJO, MIRANDO LOS DOS GRÁFICOS; ACÁ YA ME PERDÍ BASTANTE CON EL
PLANTEO DE RECORTE DE LAS STOPWORDS).
tf_idf_v2 <- words_tidy_v2 %>%
bind_tf_idf(word, medio, n)
tf_idf_v2 %>%
arrange(desc(tf_idf)) %>%
select(word) %>%
distinct()
Creamos los dataset necesarios para visualizar los principales
términos por métrica y por medio, buscando diferencias respecto a la
v1.
tf_10_v2 <- tf_idf_v2 %>%
group_by(medio) %>%
slice_max(tf, n = 10) %>%
select(medio, word, tf) %>%
rename(n = tf) %>%
mutate(n = log(n + 1) * 100) %>%
mutate(n = round(n, 4))
idf_10_v2 <- tf_idf_v2 %>%
group_by(medio) %>%
arrange(desc(idf)) %>%
slice_head(n = 10) %>%
select(medio, word, idf) %>%
rename(n = idf) %>%
mutate(n = log(n + 1) * 100) %>%
mutate(n = round(n, 4))
tf_idf_10_v2 <- tf_idf_v2 %>%
group_by(medio) %>%
arrange(desc(idf)) %>%
slice_head(n = 10) %>%
select(medio, word, tf_idf) %>%
rename(n = tf_idf) %>%
mutate(n = log(n + 1) * 100) %>%
mutate(n = round(n, 4))
crear_graf_words(tf_10_v2)

crear_graf_words(idf_10_v2)

crear_graf_words(tf_idf_10_v2)

Análisis final de TF-IDF:
Comparar con análisis anterior y validar si estamos ok con los
términos más importantes del corpus para empezar con la detección de
tópicos. A simple vista parece que todavía podemos limpiar algunas
palabras más, incluyendolas en el listado de stopwords
ampliado.
En todos los medios, excepto en La Nación que no la incluía,
logró eliminarse la palabra “anio” que figuraba en el primer lugar en
términos de frecuencia. Además, en los casos de Crónica y Minuto 1, se
eliminó otra palabra adicional incorporando, de esa manera, dos nuevas
al top diez.
El caso de La Nación ya se muestra normalizado, sin las stopwords
que aparecían producto del scraping.
ESTO ES PARA REVISAR: En el conteo de Infobae de la v2 aparecen
11 palabras en vez de 10.
| ## Modelado de tópicos: LDA |
| ¿Cuáles son los tópicos principales en el corpus?
¿Pueden evidenciar diferencias en cada uno de los medios? Explicar qué
método se utilizó para responder la pregunta, cuáles son los supuestos
del mismo. Generar las visualizaciones más adecuadas para responder a
las preguntas. |
| Para implementar un modelado de temas con LDA
necesitamos construir una matriz DTM. |
|
|
|
| ```r disc_dtm <- words_tidy_v2 %>%
cast_dtm(medio, word, n) |
| disc_dtm ``` |
|
|
<<DocumentTermMatrix (documents: 8, terms: 96410)>> Non-/sparse entries: 252546/518734 Sparsity : 67% Maximal term length: NA Weighting : term frequency (tf) |
|
|
|
|
|
|
| ```r lda_5 <- LDA(disc_dtm, k = 5, control =
list(seed = 1234)) # k es el número de tópicos a identificar |
| ap_topics <- tidy(lda_5, matrix = “beta”) |
| ap_topics %>% mutate(beta = round(100*beta,6))
``` |
|
|
|
|
|
| ```r |
| ap_top_terms <- ap_topics %>% group_by(topic)
%>% slice_max(beta, n = 15) %>% ungroup() %>% arrange(topic,
-beta) |
| ap_top_terms %>% mutate(term = reorder_within(term,
beta, topic)) %>% ggplot(aes(beta, term, fill = factor(topic))) +
geom_col(show.legend = FALSE) + facet_wrap(~ topic, scales=‘free_y’) +
scale_y_reordered() + theme_minimal() ``` |
|
|
 |
|
|
|
|
| ```r lda_10 <- LDA(disc_dtm, k = 10, control =
list(seed = 1234)) |
| ap_topics <- tidy(lda_10, matrix = “beta”) |
| ap_topics %>% mutate(beta = round(100*beta,6))
``` |
|
|
|
|
|
| ```r |
| ap_top_terms <- ap_topics %>% group_by(topic)
%>% slice_max(beta, n = 10) %>% ungroup() %>% arrange(topic,
-beta) |
| ap_top_terms %>% mutate(term = reorder_within(term,
beta, topic)) %>% ggplot(aes(beta, term, fill = factor(topic))) +
geom_col(show.legend = FALSE) + facet_wrap(~ topic, scales=‘free_y’) +
scale_y_reordered() + theme_minimal() ``` |
|
|
 |
|
|
|
| Pareciera que las pruebas tanto con cinco como con diez
tópicos no reflejan un sentido tan definido. Las dos visualizaciones
anteriores muestran que algunas palabras como “gobierno”, “presidente”,
“fernandez”, entre otras, son comunes a más de un tema. Es decir, que
los tópicos identificados tienen cierta superposición en términos de
palabras. Esto podría deberse a que los documentos en el corpus tratan
sobre temas relacionados o tienen un contenido similar. Como
alternativa, podríamos considerar los términos que tuvieran la mayor
diferencia en β entre todos los temas. |
|
|
|
| ```r |
| # ESTO NO SÉ SI ESTÁ BIEN APLICADO, EN LA NOTEBOOK EL
CASO ERA ALGO DISTINTO. SE CALCULABA SOBRE LOS TÓPICOS MÁS DEFINIDOS,
PERO EN NUESTRO CASO NINGUNO ES DEFINIDO. |
| # Con este código calculamos el logaritmo de la
proporción de cada tópico respecto al tópico de referencia para los
cinco tópicos del conjunto de datos. Cada columna log_ratio representa
la diferencia logarítmica entre los tópicos adyacentes. Esto proporciona
información sobre cómo cambia la contribución relativa de cada tópico en
comparación con su tópico adyacente. |
| beta_wide3 <- ap_topics %>% mutate(topic =
paste0(“topic”, topic)) %>% pivot_wider(names_from = topic,
values_from = beta) %>% filter(topic1 > 0.002 | topic2 > 0.002
| topic3 > 0.002 | topic4 > 0.002 | topic5 > 0.002) %>% #
Filtro para eliminar valores muy bajos mutate(log_ratio1_2 = log2(topic2
/ topic1), log_ratio2_3 = log2(topic3 / topic2), log_ratio3_4 =
log2(topic4 / topic3), log_ratio4_5 = log2(topic5 / topic4),
log_ratio5_1 = log2(topic1 / topic5)) |
| beta_wide3 ``` |
|
|
|
|
|
|
|
r beta_wide3 %>% ggplot(aes(x=reorder(term,log_ratio1_2) , y=log_ratio1_2)) + geom_col() + coord_flip() + labs(x='Término', y='Log2 ratio topic3/topic2') + theme_minimal() |
|
|
 |
|
|
|
|
|
|
r beta_wide3 %>% ggplot(aes(x=reorder(term,log_ratio2_3) , y=log_ratio2_3)) + geom_col() + coord_flip() + labs(x='Término', y='Log2 ratio topic2/topic1') + theme_minimal() |
|
|
 |
|
|
|
|
r beta_wide3 %>% ggplot(aes(x=reorder(term,log_ratio3_4) , y=log_ratio3_4)) + geom_col() + coord_flip() + labs(x='Término', y='Log2 ratio topic4/topic3') + theme_minimal() |
|
|
 |
|
|
|
|
r beta_wide3 %>% ggplot(aes(x=reorder(term,log_ratio4_5) , y=log_ratio4_5)) + geom_col() + coord_flip() + labs(x='Término', y='Log2 ratio topic5/topic4') + theme_minimal() |
|
|
 |
|
|
|
|
|
|
r beta_wide3 %>% ggplot(aes(x=reorder(term, log_ratio5_1) , y= log_ratio5_1)) + geom_col() + coord_flip() + labs(x='Término', y='Log2 ratio topic1/topic5') + theme_minimal() |
|
|
 |
|
|
|
| ``` ## Modelado de tópicos: STM |
| Para implementar un modelado de temas con STM
necesitamos construir una matriz DFM. |
|
|
|
| ```r disc_dfm <- words_tidy_v2 %>%
cast_dfm(medio, word, n) |
| disc_dfm ``` |
|
|
|
A continuación, seleccionar las noticias vinculadas a algún tópico
relevante (por ejemplo, “Elecciones”) y construir un clasificador para
predecir la orientación del diario. Utilizar alguno de los modelos de
clasificación vistos a lo largo de al Diplomatura (regresión logística,
random forest, etc.). Utilizar como features el “Spanish Billion Word
Corpus and Embeddings”, analizado en clase (pueden descargar el
embedding en formato .bin del link). ¿Qué resultados arroja el modelo?
¿Es posible mediante el texto de las noticias conocer la línea editorial
del diario? Generar las visualizaciones y tablas correspondientes para
una correcta evaluación del modelo.
LS0tCnRpdGxlOiAiVHJhYmFqbyBGaW5hbCBEaXBsb21hQ1NDIC0gT3BjacOzbiAyIgpvdXRwdXQ6IGh0bWxfbm90ZWJvb2sKZWRpdG9yX29wdGlvbnM6IAogIG1hcmtkb3duOiAKICAgIHdyYXA6IDcyCi0tLQoKIyMgQ2FyZ2EgZGUgbGlicmVyw61hcyBhIHV0aWxpemFyCgpgYGB7ciBsaWJyYXJ5fQpsaWJyYXJ5KHRpZHl2ZXJzZSkKbGlicmFyeSh0aWR5dGV4dCkKbGlicmFyeSh0bSkKbGlicmFyeSh0ZXh0c3RlbSkKbGlicmFyeShwYXRjaHdvcmspCmxpYnJhcnkod29yZGNsb3VkKSAKbGlicmFyeShwbG90bHkpCmxpYnJhcnkodG9waWNtb2RlbHMpCmxpYnJhcnkodGljdG9jKQpsaWJyYXJ5KGNvd3Bsb3QpCmxpYnJhcnkocmVzaGFwZTIpCmBgYAoKIyMgRXRhcGEgMTogY2FyZ2EgZGUgZGF0b3MgeSBwcmVwcm9jZXNhbWllbnRvCgpFbCBhcmNoaXZvIHF1ZSBzZSBhZGp1bnRhIGNvbnNpc3RlIGVuIHVuIGNvcnB1cyBkZSB1bmFzIDcuMDAwIG5vdGljaWFzCnNjcmFwZWFkYXMgZW50cmUganVsaW8geSBzZXB0aWVtYnJlIGRlIDIwMTkgZGUgbG9zIHNpZ3VpZW50ZXMgbWVkaW9zIGRlCmNpcmN1bGFjacOzbiBuYWNpb25hbDoKClTDqWxhbSBMYSBOYWNpw7NuIENsYXLDrW4gUGVyZmlsIEluZm9iYWUgTWludXRvVW5vIFDDoWdpbmEgMTIKCkNvbnN0aXR1eWUgdW5hIG11ZXN0cmEgYWxlYXRvcmlhIGRlbCBjb3JwdXMgY29uc3RydWlkbyBwb3IgRmxvcmVuY2lhClBpw7FleXLDumEgcGFyYSBzdSB0ZXNpbmEgZGUgZ3JhZG8g4oCcUHJvY2VzYW1pZW50byBkZWwgbGVuZ3VhamUgbmF0dXJhbAphcGxpY2FkbyBhbCBlc3R1ZGlvIGRlIHTDs3BpY29zIGRlIG5vdGljaWFzIGRlIHNlZ3VyaWRhZCBlbiBBcmdlbnRpbmE6Cmp1bGlvIGEgc2VwdGllbWJyZSAyMDE54oCdLiBVbmEgZXhwb3NpY2nDs24gbcOhcyBjb25jZW50cmFkYSBkZSBzdXMKcmVzdWx0YWRvcyBwdWVkZSBlbmNvbnRyYXJzZSBlbiBlbCBzaWd1aWVudGUgYXJ0w61jdWxvLgoKRWwgY29ycHVzIGNvbnRpZW5lIGxhcyBzaWd1aWVudGVzIHZhcmlhYmxlczoKCmlkIDogaWRlbnRpZmljYWRvciBkZSBjYWRhIGRvY3VtZW50bwoKdXJsIDogbGluayBhIGxhIG5vdGljaWEgb3JpZ2luYWwKCmZlY2hhIDogZmVjaGEgZGUgcHVibGljYWNpw7NuCgphbmlvIDogYcOxbyBkZSBwdWJsaWNhY2nDs24KCm1lcyA6IG1lcyBkZSBwdWJsaWNhY2nDs24KCmRpYSA6IGRpYSBkZSBwdWJsaWNhY2nDs24KCm1lZGlvIDogbWVkaW8gZW4gZWwgcXVlIGZ1ZSBwdWJsaWNhZG8KCm9yaWVudGFjaW9uOiBjbGFzaWZpY2FjacOzbiAtcHJvdmlzb3JpYS0gZGUgbG9zIG1lZGlvcyBzZWfDum4gc3UgbMOtbmVhCmVkaXRvcmlhbCBwcmVkb21pbmFudGUgKG3DoXMgY29uc2VydmFkb3IsIG3DoXMgcHJvZ3Jlc2lzdGEsIG5ldXRyYWwpCgp0aXR1bG8KCnRleHRvCgojIyMgQ2FyZ2EgZGF0YXNldAoKYGBge3IgcmVhZGNzdn0KY29ycHVzX2Jhc2UgPC0gcmVhZF9jc3YoIk01X2NvcnB1c19tZWRpb3MuY3N2IikKYGBgCgpgYGB7ciBhbmFsaXNpc19iYXNlfQojIEVuIGVzdGUgYXBhcnRhZG8gdmVtb3MgY3XDoW50YXMgbm90aWNpYXMgYXBvcnRhIGNhZGEgbWVkaW8gYWwgY29ycHVzIHkgY2FsY3VsYW1vcyBsYSBwcm9wb3JjacOzbiBzb2JyZSBlbCB0b3RhbC4KCiAgICBjb3JwdXNfYmFzZSAlPiUKICAgICAgICBncm91cF9ieShtZWRpbykgJT4lCiAgICAgICAgc3VtbWFyaXNlKG49bigpKSAlPiUKICAgICAgICBtdXRhdGUoCiAgICAgICAgICAgICAgICB0b3RhbCA9IHN1bShuKSwKICAgICAgICAgICAgICAgIHByb3AgPSBuL3RvdGFsKjEwMAogICAgICAgICAgICAgICAgKSAlPiUKICAgICAgICB1bmdyb3VwKCkgJT4lCiAgICAgICAgc2VsZWN0KG1lZGlvLCBuLCBwcm9wKSAlPiUgCiAgICAgICAgYXJyYW5nZShkZXNjKG4pKQpgYGAKCiMjIyBOb3JtYWxpemFjacOzbiB5IHRva2VuaXphY2nDs24KCmBgYHtyIHRva2Vuc30KY29ycHVzX3RpZHkgPC0gY29ycHVzX2Jhc2UgJT4lIAogICAgbXV0YXRlKHRleHRvPSBzdHJpbmdpOjpzdHJpX3RyYW5zX2dlbmVyYWwodGV4dG8sICJMYXRpbi1BU0NJSSIpLAogICAgICAgICB0aXR1bG8gPSBzdHJpbmdpOjpzdHJpX3RyYW5zX2dlbmVyYWwodGl0dWxvLCAiTGF0aW4tQVNDSUkiKSkgJT4lIAogICAgbXV0YXRlKHRleHRvID0gc3RyX3JlcGxhY2VfYWxsKHRleHRvLCAnW1s6ZGlnaXQ6XV0rJywgJycpKSAlPiUgCiAgICB1bm5lc3RfdG9rZW5zKHdvcmQsIHRleHRvLCB0b19sb3dlciA9IFRSVUUpCgojIEVuIGVzdGUgZXN0ZSBjw7NkaWdvIHRvbWFtb3MgZWwgY29ycHVzIGRlIHRleHRvICJjb3JwdXNfYmFzZSIsIGxvIG5vcm1hbGl6YW1vcyBjb252aXJ0aWVuZG8gZWwgdGV4dG8geSBlbCB0w610dWxvIGEgY2FyYWN0ZXJlcyBBU0NJSSwgZWxpbWluYW1vcyBsb3MgZMOtZ2l0b3MgZGVsIHRleHRvIHkgZmluYWxtZW50ZSBsb3MgZGl2aWRpbW9zIGVuIHRva2VucyBwYXJhIHN1IHBvc3RlcmlvciBhbsOhbGlzaXMuCmBgYAoKIyMjIEVsaW1pbmFyIHN0b3B3b3JkcwoKYGBge3Igc3RvcHdvcmRzfQpzdG9wX3dvcmRzXzEgPC0gcmVhZF9jc3YoJ2h0dHBzOi8vcmF3LmdpdGh1YnVzZXJjb250ZW50LmNvbS9BbGlyM3o0L3N0b3Atd29yZHMvbWFzdGVyL3NwYW5pc2gudHh0JywgY29sX25hbWVzPUZBTFNFKSAlPiUKICAgICAgICByZW5hbWUod29yZCA9IFgxKSAlPiUKICAgICAgICBtdXRhdGUod29yZCA9IHN0cmluZ2k6OnN0cmlfdHJhbnNfZ2VuZXJhbCh3b3JkLCAiTGF0aW4tQVNDSUkiKSkKCiMgRW4gZXN0ZSBjw7NkaWdvIGxlZW1vcyB1biBhcmNoaXZvIENTViBkZSBzdG9wIHdvcmRzIGVuIGVzcGHDsW9sIHViaWNhZG8gZW4gbGEgVVJMIGVzcGVjaWZpY2FkYSwgcmVub21icmFtb3MgbGEgY29sdW1uYSBhICJ3b3JkIiB5IGx1ZWdvIHRyYW5zZm9ybWFtb3MgbGFzIHBhbGFicmFzIGVuIGxhIGNvbHVtbmEgcGFyYSBhc2VndXJhcm5vcyBkZSBxdWUgZXN0w6luIGVuIGZvcm1hdG8gQVNDSUkuIEVsIHJlc3VsdGFkbyBmaW5hbCBlcyB1biBkYXRhZnJhbWUgbGxhbWFkbyAic3RvcF93b3Jkc18xIiBxdWUgY29udGllbmUgbGEgbGlzdGEgZGUgc3RvcHdvcmRzIG5vcm1hbGl6YWRhcy4KCnN0b3Bfd29yZHNfMiA8LSByZWFkX2Nzdigiel9zdG9wd29yZHMudHh0IiwgY29sX25hbWVzID0gRkFMU0UpICU+JSAKICByZW5hbWUod29yZCA9IFgxKSAlPiUgCiAgIG11dGF0ZSh3b3JkPXN0cmluZ2k6OnN0cmlfdHJhbnNfZ2VuZXJhbCh3b3JkLCAiTGF0aW4tQVNDSUkiKSkKCiMgw41kZW0gcGVybyBlbCBhcmNoaXZvIENTViBsbGFtYWRvICJ6X3N0b3B3b3Jkcy50eHQiIHNlIGNhcmdhIGRlc2RlIGxhIGNhcnBldGEuCgpzdG9wX3dvcmRzX2Z1bGwgPC0gc3RvcF93b3Jkc18xICU+JSAKICBiaW5kX3Jvd3Moc3RvcF93b3Jkc18yKSAlPiUgCiAgZGlzdGluY3QoKQoKIyBFbiBlc3RlIHBhc28gY29tYmluYW1vcyBsb3MgZG9zIGRhdGFmcmFtZXMgZGUgc3RvcHdvcmRzLCBlbGltaW5hbW9zIGxhcyBmaWxhcyBkdXBsaWNhZGFzIHkgZ3VhcmRhbW9zIGVsIHJlc3VsdGFkbyBlbiB1biBudWV2byBkYXRhZnJhbWUgbGxhbWFkbyAic3RvcF93b3Jkc19mdWxsIi4gRXN0ZSBkYXRhZnJhbWUgY29udGllbmUgbGEgbGlzdGEgY29tcGxldGEgeSDDum5pY2EgZGUgc3RvcHdvcmRzIG5vcm1hbGl6YWRhcy4KCmNvcnB1c190aWR5IDwtIGNvcnB1c190aWR5ICU+JSAKICBhbnRpX2pvaW4oc3RvcF93b3Jkc19mdWxsKQoKIyBFbiBlc3RlIGPDs2RpZ28gZWxpbWluYW1vcyBsYXMgc3RvcHdvcmRzIGRlbCBjb3JwdXMgZGUgdGV4dG8gImNvcnB1c190aWR5IiB1dGlsaXphbmRvIGxhIGxpc3RhIGRlIHN0b3B3b3JkcyBjb250ZW5pZGEgZW4gZWwgZGF0YWZyYW1lICJzdG9wX3dvcmRzX2Z1bGwiLiBFc3RlIHBhc28gZW4gZWwgcHJvY2VzYW1pZW50byBkZSB0ZXh0byBlcyBuZWNlc2FyaW8gcGFyYSBlbGltaW5hciBwYWxhYnJhcyBxdWUgbm8gYXBvcnRhbiBzaWduaWZpY2FkbyBwYXJhIGVsIGFuw6FsaXNpcyBwb3N0ZXJpb3IuCmBgYAoKIyMjIENvcnJlY2Npw7NuICJhw7FvcyIKCmBgYHtyIGNvcnB1c190aWR5fQpjb3JwdXNfdGlkeSA8LSBjb3JwdXNfdGlkeSAlPiUgCiAgbXV0YXRlKHdvcmQgPSBjYXNlX3doZW4oCiAgICB3b3JkID09ICdhbm8nIH4gJ2FuaW8nLAogICAgd29yZCA9PSAnYW5vcycgfiAnYW5pbycsCiAgICBUUlVFIH4gd29yZAogICkpCmBgYAoKYGBge3J9CiMgUFJPQsOJIFVOIE1PTlTDk04gREUgQUxURVJOQVRJVkFTLCBQRVJPIEVMIEPDk0RJR08gREUgTEEgTEVNQVRJWkFDScOTTiBTSUdVRSBTSU4gRlVOQ0lPTkFSIChGSUpBVEUgUVVFIEVMIEVMRU1FTlRPIENPUlBVU19USURZX0xFTU0gRFVQTElDQSBMQVMgTUlNQVMgUEFMQUJSQVMgRU4gTEEgw5pMVElNQSBDT0xVTU5BKS4gRU5USUVORE8gUVVFIFBVRURFIFNFUiBVTiBURU1BIERFTCBESUNDSU9OQVJJTyBRVUUgU0UgVVNBLCBQRVJPIENPTiBPVFJBUyBPUENJT05FUyBUQU1QT0NPIE1FIEZVTkNJT05BCmNvcnB1c190aWR5X2xlbW0gPC0gY29ycHVzX3RpZHkgJT4lCiAgbXV0YXRlKHdvcmRfbGVtbWF0aXplZCA9IGxlbW1hdGl6ZV93b3Jkcyh3b3JkLCBsYW5ndWFnZSA9ICJlcyIpKQoKY29ycHVzX3RpZHlfbGVtbSAlPiUgCiAgZmlsdGVyKHdvcmQgIT0gd29yZF9sZW1tYXRpemVkKSAlPiUgCiAgc2VsZWN0KHdvcmQsIHdvcmRfbGVtbWF0aXplZCkKYGBgCgojIyBFdGFwYSAyOiBDb25zaWduYXMKCsK/Q3XDoWxlcyBzb24gbGFzIHBhbGFicmFzIG3DoXMgdXRpbGl6YWRhcyBlbiBjYWRhIHVubyBkZSBsb3MgbWVkaW9zPwrCv1B1ZWRlbiB2ZXJzZSBkaWZlcmVuY2lhcz8gKFRlbmVyIGVuIGN1ZW50YSBsYXMgZGlmZXJlbnRlcyBtw6l0cmljYXMKdHJhYmFqYWRhcyBlbiBlbCBjdXJzbzogdGYsIHRmLWlkZiwgZXRjLikgR2VuZXJhciBsYXMgdmlzdWFsaXphY2lvbmVzCnF1ZSBjb25zaWRlcmUgbcOhcyBwZXJ0aW5lbnRlcyBwYXJhIHJlc3BvbmRlciBsYSBwcmVndW50YS4KCiMjIyBFeHBsb3JhY2nDs24gcGFsYWJyYXMgbcOhcyBmcmVjdWVudGVzCgpDb21lbnphbW9zIGV4cGxvcmFuZG8gZWwgY29ycHVzIGVuIGZvcm1hdG8gdGlkeSBwYXJhIGlkZW50aWZpY2FyCnLDoXBpZGFtZW50ZSBhbGd1bm9zIGRlIGxvcyB0w6lybWlub3MgbcOhcyBmcmVjdWVudGVzIHBvciBtZWRpby4KCmBgYHtyIGV4cGxvcmVfZnJlcXN9CmNvcnB1c190aWR5ICU+JQogICAgICAgIGdyb3VwX2J5KHdvcmQsIG1lZGlvKSAlPiUKICAgICAgICBzdW1tYXJpc2Uobj1uKCkpICU+JQogICAgICAgIGFycmFuZ2UoZGVzYyhuKSkKCiMgTWVkaWFudGUgZXN0ZSBjw7NkaWdvIGFncnVwYW1vcyBsYXMgcGFsYWJyYXMgw7puaWNhcyBlbiBlbCBjb3JwdXMsIGNvbnRhbW9zIGVsIG7Dum1lcm8gZGUgb2N1cnJlbmNpYXMgZGUgY2FkYSBwYWxhYnJhIHkgbGFzIG9yZGVuYW1vcyBlbiBmdW5jacOzbiBkZSBzdSBmcmVjdWVuY2lhIGRlIGFwYXJpY2nDs24sIG1vc3RyYW5kbyBwcmltZXJvIGxhcyBwYWxhYnJhcyBtw6FzIGZyZWN1ZW50ZXMuCgpjb3JwdXNfdGlkeSAlPiUKICBmaWx0ZXIobWVkaW8gPT0gJ2luZm9iYWUnKSAgJT4lIAogIGdyb3VwX2J5KHdvcmQpICU+JQogIHN1bW1hcmlzZShuPW4oKSkgJT4lCiAgYXJyYW5nZShkZXNjKG4pKQogICAgICAgIAojIE1pcmFkYSByw6FwaWRhIGEgbGFzIHBhbGFicmFzIG3DoXMgZnJlY3VlbnRlcyBkZSBhbGd1bm9zIG1lZGlvcwoKY29ycHVzX3RpZHkgJT4lCiAgICAgICAgZ3JvdXBfYnkobWVkaW8sIHdvcmQpICU+JQogICAgICAgIHN1bW1hcmlzZShuPW4oKSkgJT4lCiAgICAgICAgYXJyYW5nZShkZXNjKG4pKSAlPiUKICAgICAgICBwaXZvdF93aWRlcihuYW1lc19mcm9tID0gbWVkaW8sCiAgICAgICAgICAgICAgICAgICAgdmFsdWVzX2Zyb20gPSBuKQoKIyBFc3RlIGPDs2RpZ28gY2FsY3VsYSBlbCByZWN1ZW50byBkZSBvY3VycmVuY2lhcyBkZSBjYWRhIHBhbGFicmEgZW4gZWwgY29ycHVzIGRlIHRleHRvIGFncnVwYWRvIHNlZ8O6biBlbCBtZWRpbyBkZSBjb211bmljYWNpw7NuLCB5IGx1ZWdvIHJlb3JnYW5pemEgZXN0b3MgcmVzdWx0YWRvcyBlbiB1biBmb3JtYXRvIG3DoXMgYW5jaG8gZG9uZGUgY2FkYSBtZWRpbyB0aWVuZSBzdXMgcmVjdWVudG9zIGRlIG9jdXJyZW5jaWFzIGFzb2NpYWRvcyBwYXJhIGNhZGEgcGFsYWJyYS4KCmBgYAoKYGBge3Igd29yZF9jb3VudHN9CndvcmRfY291bnRzXzEwIDwtIGNvcnB1c190aWR5ICU+JQogICAgICAgIGdyb3VwX2J5KG1lZGlvLCB3b3JkKSAlPiUKICAgICAgICBzdW1tYXJpc2Uobj1uKCkpICU+JQogICAgICAgIHNsaWNlX21heChuLCBuID0gMTApICU+JSAKICAgICAgICB1bmdyb3VwKCkKCiMgRW4gZXN0ZSBwYXNvIGNhbGN1bGFtb3MgZWwgcmVjdWVudG8gZGUgb2N1cnJlbmNpYXMgZGUgY2FkYSBwYWxhYnJhIGVuIGVsIGNvcnB1cywgYWdydXBhZGFzIHBvciBsYSBjb2x1bW5hICJtZWRpbyIsIHkgYWxtYWNlbmEgZXN0b3MgcmVjdWVudG9zIGVuIHVuIG51ZXZvIGRhdGFmcmFtZSBsbGFtYWRvICJ3b3JkX2NvdW50cyIgcGFyYSBwYXNhcmxlIGEgbGEgZnVuY2nDs24gZGUgZ3JhZmljYWRvLgoKd29yZF9jb3VudHNfYWxsXzEwIDwtIGNvcnB1c190aWR5ICU+JQogICAgICAgIGdyb3VwX2J5KHdvcmQpICU+JQogICAgICAgIHN1bW1hcmlzZShuPW4oKSkgJT4lCiAgICAgICAgc2xpY2VfbWF4KG4sIG4gPSAxMCkgJT4lIAogICAgICAgIHVuZ3JvdXAoKSAlPiUgCiAgICAgICAgbXV0YXRlKG1lZGlvID0gJ2dlbmVyYWwnKQoKIyBBcXXDrSBjYWxjdWxhbW9zIGVsIHJlY3VlbnRvIGRlIG9jdXJyZW5jaWFzIGRlIGNhZGEgcGFsYWJyYSBlbiBlbCBjb3JwdXMsIHNpbiBhZ3J1cGFyIHBvciBtZWRpby4gTHVlZ28sIHNlbGVjY2lvbmFtb3MgbGFzIDEwIHBhbGFicmFzIG3DoXMgY29tdW5lcyBlbiB0b2RvIGVsIGNvcnB1cy4gQSBlc3RvcyByZXN1bHRhZG9zIGxlcyBhZ3JlZ2Ftb3MgbGEgZXRpcXVldGEgImdlbmVyYWwiIGVuIGxhIGNvbHVtbmEgIm1lZGlvIiBwYXJhIHBvZGVyIGNvbXBhcmFyIHZpc3VhbG1lbnRlIGxhIGRpc3RyaWJ1Y2nDs24gZ2VuZXJhbCBjb24gbGEgZGlzdHJpYnVjacOzbiBwb3IgbWVkaW8KCndvcmRfY291bnRzX3RvcF8xMCA8LSB3b3JkX2NvdW50c18xMCAlPiUgCiAgYmluZF9yb3dzKHdvcmRfY291bnRzX2FsbF8xMCkKCiMgVW5pZmljbyBlbiB1biBkYXRhc2V0CmBgYAoKQSBjb250aW51YWNpw7NuIGNyZWFtb3MgdW5hIGZ1bmNpw7NuIHBhcmEgYXV0b21hdGl6YXIgdG9kYXMgbGFzCnZpc3VhbGl6YWNpb25lcyByZWxhY2lvbmFkYXMgYSBsYXMgbcOpdHJpY2FzIGRlbCBjb3JwdXMuIENPTUVOVEFSSU86IENVw4FMRVMgU0VSw41BTiBMQVMgTcOJVFJJQ0FTPyBFTiBUT0RPIENBU08sIEhBU1RBIE5PIEFQQVJFQ0UgVU5BIFNPTEEgTcOJVFJJQ0E/IChMQSBGUkVDVUVOQ0lBKQoKYGBge3IgY3JlYXJfdml6fQpjcmVhcl9ncmFmX3dvcmRzIDwtIGZ1bmN0aW9uKGRhdGEpIHsKICBtZWRpb3MgPC0gdW5pcXVlKGRhdGEkbWVkaW8pCiAgZ3JhZmljb3MgPC0gbGlzdCgpCiAgCiAgZm9yIChtZWRpb19hY3R1YWwgaW4gbWVkaW9zKSB7CiAgICBkYXRvc19tZWRpbyA8LSBkYXRhICU+JQogICAgICBmaWx0ZXIobWVkaW8gPT0gbWVkaW9fYWN0dWFsKSAlPiUKICAgICAgbXV0YXRlKHdvcmQgPSBmY3RfcmVvcmRlcih3b3JkLCBuKSkKICAgIAogICAgZ3JhZmljbyA8LSBnZ3Bsb3QoZGF0b3NfbWVkaW8sIGFlcyhuLCB3b3JkKSkgKwogICAgICAgICAgICAgICAgZ2VvbV9jb2woKSArCiAgICAgICAgICAgICAgICBnZW9tX3RleHQoYWVzKGxhYmVsID0gbiksIHBvc2l0aW9uID0gcG9zaXRpb25fc3RhY2sodmp1c3QgPSAwLjUpLCBmYW1pbHkgPSAiQ291cmllciIsIGNvbG9yID0gIndoaXRlIikgKwogICAgICAgICAgICAgICAgbGFicyh0aXRsZSA9IG1lZGlvX2FjdHVhbCwKICAgICAgICAgICAgICAgICAgICAgeCA9ICJGcmVjdWVuY2lhIiwKICAgICAgICAgICAgICAgICAgICAgeSA9ICJQYWxhYnJhIikgKwogICAgICAgICAgICAgICAgdGhlbWVfY2xhc3NpYygpKwogICAgICAgICAgICAgICAgdGhlbWUocGxvdC50aXRsZSA9IGVsZW1lbnRfdGV4dChoanVzdD0gMC41KSwKICAgICAgICAgICAgICAgICAgICAgIGF4aXMudGl0bGUgPSBlbGVtZW50X2JsYW5rKCksCiAgICAgICAgICAgICAgICAgICAgICBheGlzLnRpY2tzLnggPSBlbGVtZW50X2JsYW5rKCksCiAgICAgICAgICAgICAgICAgICAgICB0ZXh0ID0gZWxlbWVudF90ZXh0KGZhbWlseSA9ICJDb3VyaWVyIikpCiAgICAKICAgIGdyYWZpY29zW1ttZWRpb19hY3R1YWxdXSA8LSBncmFmaWNvCiAgfQogIAogIHdyYXBfcGxvdHMoZ3JhZmljb3MpCn0KCiMgRXN0YSBmdW5jacOzbiBjcmVhIHBhcmEgY2FkYSBtZWRpbyB1biBncsOhZmljbyBjb24gZWwgdG9wIDEwIGRlIHBhbGFicmFzIHNlZ8O6biBjYWRhIG3DqXRyaWNhIGFuYWxpemFkYQoKYGBgCgpFbCBlamUgeCBtdWVzdHJhIGxhcyBwYWxhYnJhcyB5IGVsIGVqZSB5IG11ZXN0cmEgbGEgZnJlY3VlbmNpYSBkZSBjYWRhCnBhbGFicmEuIEVsIGdyw6FmaWNvIGVzdMOhIHNlZ21lbnRhZG8gZW4gcGFuZWxlcyBwb3IgY2FkYSBtZWRpbywgeSBsYXMKZXNjYWxhcyBkZWwgZWplIHkgc2UgYWp1c3RhbiBwYXJhIGNhZGEgcGFuZWwgaW5kaXZpZHVhbC4KCmBgYHtyIHZpen0KY3JlYXJfZ3JhZl93b3Jkcyh3b3JkX2NvdW50c190b3BfMTApCgojIEVzdGUgY8OzZGlnbyBnZW5lcmEgdW5hIHZpc3VhbGl6YWNpw7NuIGRlIGxhcyBwYWxhYnJhcyBtw6FzIGNvbXVuZXMgZW4gZWwgY29ycHVzLCBkZXNnbG9zYWRhcyBwb3IgbWVkaW8geSBlbiBnZW5lcmFsLiBMYXMgcGFsYWJyYXMgbcOhcyBjb211bmVzIHNlIG11ZXN0cmFuIGVuIG9yZGVuIGRlc2NlbmRlbnRlIGRlIGZyZWN1ZW5jaWEgZW4gY2FkYSBjYXRlZ29yw61hLgpgYGAKCkFsZ3VuYXMgb2JzZXJ2YWNpb25lcyBwcmVsaW1pbmFyZXM6CgotICAgQ2xhcsOtbiBlIEluZm9iYWUgYXBvcnRhbiBjYWRhIHVubyBlbCAyMiUgZGUgbGFzIG5vdGljaWFzIGFsIGNvcnB1cy4gRWwgcGVzbyBkZSBsYXMgcGFsYWJyYXMgbcOhcyBpbXBvcnRhbnRlcyBwYXJhIGVzdG9zIG1lZGlvcyBlbiBlbCByYW5raW5nIGdlbmVyYWwgZXMgYWx0by4KCi0gICBBw7FvIHBhcmVjZSB1bmEgc3RvcHdvcmQgcG9ycXVlIGVzIHVuYSBwYWxhYnJhIHF1ZSBwcmVzZW50YSB1bmEgZnJlY3VlbmNpYSBhbHRhIGludHJhIGUgaW50ZXIgbWVkaW9zLgoKLSAgIENyw7NuaWNhLCBMTiBlIEluZm9iYWUgc29uIGxvcyDDum5pY29zIHF1ZSBubyBpbmNsdXllbiBub21icmVzIHByb3Bpb3MKZW50cmUgbGFzIHBhbGFicmFzIG3DoXMgZnJlY3VlbnRlcy4KCi0gICBFbiBMTiBoYXkgbXVjaGFzIHJlZmVyZW5jaWFzIGEgcmVkZXMgc29jaWFsZXMgeSBhY2Npb25lcyBlbiBlbGxhcyAoZ3VhcmRhciwgY29tcGFydGlyKS4gTGFzIGFjY2lvbmVzIHkgImZ1ZW50ZSIgcG9kcsOtYW4gc2VyIHN0b3B3b3Jkcy4gSW5jbHVzbyBsYXMgbWVuY2lvbmVzIGEgUlJTUyBwb2Ryw61hbiBzZXIgcHJvZHVjdG8gZGVsIHNjcmFwcGluZyB5IG5vIGRlbCBjb250ZW5pZG8gZGUgbGFzIG5vdGFzLiBDT01FTlRBUklPOiBFU1RPIFBBUkVDRVLDjUEgU0VSIEFTw40sIE5PPyBESUdPLCBRVUUgVEFMIFZFWiBTRUEgTEEgUkVTUFVFU1RBIFFVRSBTRSBCVVNDQSwgTEEgQ09SUkVDVEEsIFBPUlFVRSBFTiBERUZJTklUSVZBIFNFIEFQTElDQVJPTiBMT1MgTUlTTU9TIEPDk0RJR09TIEEgVE9ET1MgTE9TIE1FRElPUy4gRU5UT05DRVMsIFNFR1VSQU1FTlRFIFNFQSBDT01PIERFQ8ONUywgVU4gRVJST1IgREVMIFNDUkFQUElORy4gQ09NRU5UQVJJTyBMVUVHTyBERUwgVjI6IFlBIFFVRUTDkyBDT1JSRUdJRE8gRUwgQ0FTTyBERSBMTiwgUEVSTyBOTyBFTlRJRU5ETyBDw5NNTyBKQUpBIChESUdPLCBURU5JRU5ETyBFTiBDVUVOVEEgRUwgQ09NRU5UQVJJTyBBTlRFUklPUiBRVUUgSElDRSkuCgotICAgTWFjcmkgYXBhcmVjZSBjb21vIGVsIHBvbMOtdGljbyBtw6FzIG5vbWJyYWRvLiBMw7NnaWNhbWVudGUsIGVzIHVuIHJlc3VsdGFkbyBlc3BlcmFibGUgc2kgc2UgdGllbmUgZW4gY3VlbnRhIHF1ZSBsYXMgbm90YXMgcmVsZXZhZGFzIGNvcnJlc3BvbmRlbiBhbCDDumx0aW1vIGHDsW8gZGUgc3UgZ29iaWVybm8uIAoKLSAgSW5mb2JhZSB5IHNvYnJlIHRvZG8gQ3LDs25pY2EgcGFyZWNlbiBjdWJyaXIgdGVtYXMgbcOhcyBnZW5lcmFsZXMgcXVlIGxvcyBkZW3DoXMgbWVkaW9zLCBhbCBpbmNsdWlyIHBhbGFicmFzIGNvbW8gInBvbMOtY8OtYSIsICJjaXVkYWQiLCAibXVqZXIiLCAiaG9tYnJlIiwgImNhc2EiLCAicGVyc29uYXMiLCAibXVuZG8iLCAidmlkYSIuIEluY2x1c28sIGxhIGZyZWN1ZW5jaWEgZGUgbGEgcGFsYWJyYSAicG9saWPDrWEiIGVuIENyw7NuaWNhICgjMiBvICMxIHNpIHNlIGV4Y2x1eWUgZWwgdMOpcm1pbm8gImFuaW8iKSBwb2Ryw61hIGluZGljYXIgcXVlIGxhIG1heW9yIHBhcnRlIGRlIGxhIGNvYmVydHVyYSBkZSBlc3RlIG1lZGlvIHNlIG9yaWVudGEgYSBsYSB0ZW3DoXRpY2EgcG9saWNpYWwuIERlIHRvZGFzIGZvcm1hcywgZW4gZWwgdG9wIDEwIHRhbWJpw6luIGFwYXJlY2VuIHBhbGFicmFzIGNvbW8gImdvYmllcm5vIiB5ICJwcmVzaWRlbnRlIi4KCi0gICBMYSBwYWxhYnJhICJmcmVudGUiIGFwYXJlY2UgY29uIGZyZWN1ZW5jaWEgZW4gdmFyaW9zIG1lZGlvcywgbG8gcXVlCm5vcyBpbmNsaW5hIGEgY29ycm9ib3JhciBzaSByZWZpZXJlIGEgZnJlbnRlcyBlbGVjdG9yYWxlcyBvIHNpbXBsZW1lbnRlIGEgdW4gYWR2ZXJiaW8gZGUgbHVnYXIgeSwgZW4gZXN0ZSBjYXNvLCBkZWJlcsOtYSBjb25zaWRlcmFyc2UgY29tbyBzdG9wd29yZC4KCi0gICBBIG1vZG8gZGUgc8OtbnRlc2lzLCBwb2Ryw61hIGFkdmVydGlyc2UgcXVlIGxhcyBwYWxhYnJhcyBjb24gbWF5b3IgZnJlY3VlbmNpYSBkZSBhcGFyaWNpw7NuIGVuIGxhIHRvdGFsaWRhZCBkZSBsb3MgbWVkaW9zIHNlIGNvcnJlc3BvbmRlbiBjb24gbGEgdGVtw6F0aWNhIHBvbMOtdGljYS4gRXMgcHJvYmFibGUgcXVlIGVzdGEgdmluY3VsYWNpw7NuIHNlYSB1biBkZXNwcmVuZGltaWVudG8gZGVsIGVzY2VuYXJpbyBlbGVjdG9yYWwgcXVlIHNpZ27DsyBlbCBwZXLDrW9kbyBiYWpvIGFuw6FsaXNpcy4KCgojIyMgVGVybSBGcmVxdWVuY3kgLSBURjoKCkEgbW9kbyBkZSBwcsOhY3RpY2EgZ2VuZXJhbW9zIGVsIGPDoWxjdWxvIGRlIHRlcm0gZnJlcXVlbmN5IG1hbnVhbG1lbnRlCnBhcmEgdmlzdWFsaXphciBsYSBkaXN0cmlidWNpw7NuIGRlIHTDqXJtaW5vcyBzZWfDum4gc3UKZnJlY3VlbmNpYSByZXNwZWN0byBhbCB0b3RhbCBkZSB0w6lybWlub3MsIGFwZXJ0dXJhZG8gcG9yIG1lZGlvLgoKYGBge3IgdGZfbWFudWFsfQojIExhICJ0ZXJtIGZyZXF1ZW5jeSIgKGZyZWN1ZW5jaWEgZGUgdMOpcm1pbm8pIGVzIHVuYSBtw6l0cmljYSBwYXJhIGV2YWx1YXIgbGEgaW1wb3J0YW5jaWEgZGUgdW5hIHBhbGFicmEgZW4gdW4gZG9jdW1lbnRvIG8gY29ycHVzIGRlIGRvY3VtZW50b3MsIGEgcGFydGlyIGRlIGxhIG1lZGljacOzbiBkZSBsYSBmcmVjdWVuY2lhIGRlIHN1IGFwYXJpY2nDs24gZW4gY29tcGFyYWNpw7NuIGNvbiBlbCBuw7ptZXJvIHRvdGFsIGRlIHBhbGFicmFzLgoKd29yZHNfdGlkeSA8LSBjb3JwdXNfdGlkeSAlPiUgCiAgZ3JvdXBfYnkobWVkaW8sIHdvcmQpICU+JQogIHN1bW1hcmlzZShuPW4oKSkgJT4lIAogIGFycmFuZ2UoZGVzYyhuKSkgCgp0b3RhbF93b3JkcyA8LSB3b3Jkc190aWR5ICU+JQogICAgICAgIGdyb3VwX2J5KG1lZGlvKSAlPiUKICAgICAgICBzdW1tYXJpemUodG90YWwgPSBzdW0obikpIAoKd29yZHNfdGlkeSA8LSB3b3Jkc190aWR5ICU+JSAKICBsZWZ0X2pvaW4odG90YWxfd29yZHMpICU+JSAKICB1bmdyb3VwKCkgJT4lIAogIGFycmFuZ2UoZGVzYyhuKSkKCiMgRW4gZXN0ZSBjw7NkaWdvIGNvbnRhbW9zIGxhIGZyZWN1ZW5jaWEgZGUgY2FkYSBwYWxhYnJhIGVuIGVsIGNvcnB1cyBkZWwgbWVkaW8geSB0YW1iacOpbiBlbCB0b3RhbCBkZSBwYWxhYnJhcyBlbiBlbCBtZWRpby4gQ29uIGVzdG9zIGRhdG9zIHBvZGVtb3MgY2FsY3VsYXIgYSBjb250aW51YWNpw7NuIGxhIGltcG9ydGFuY2lhIGRlIGNhZGEgdMOpcm1pbm8gZW4gZWwgbWVkaW8uCmBgYAoKRW4gZXN0YSB2aXN1YWxpemFjacOzbiBwb2RlbW9zIGludGVyYWN0dWFyIHBhcmEgaWRlbnRpZmljYXIgbGEgY2FudGlkYWQKZGUgdMOpcm1pbm9zIHBvciB0ZjoKCipJZGVh4oCTXD4gYWdyZWdhciBkYXRvIGRlIHTDqXJtaW5vcyB0b3RhbGVzIHBvciBtZWRpbyBwYXJhIGNvbXByZW5kZXIgcXXDqQpwZXNvIHRpZW5lIGNhZGEgbMOtbmVhIGRlIHRmL2NvdW50IGRlIHTDqXJtaW5vcyBlbiBjYWRhIGNvcnB1cy4qCgpgYGB7ciB0Zl92aXpfbWFudWFsfQp0Zl92aXogPC0gd29yZHNfdGlkeSAlPiUgbXV0YXRlKHRmID0gbi90b3RhbCkgJT4lCiAgICAgICAgICBnZ3Bsb3QoYWVzKHRmKSkgKwogICAgICAgICAgICAgICAgZ2VvbV9oaXN0b2dyYW0oc2hvdy5sZWdlbmQgPSBGQUxTRSkgKwogICAgICAgICAgICAgICAgY29vcmRfZmxpcCgpKwogICAgICAgICAgICAgICAgeGxpbShOQSwgMC4wMDAyKSArCiAgICAgICAgICAgICAgICBmYWNldF93cmFwKH5tZWRpbykgKwogICAgICAgICAgICAgICAgdGhlbWVfY2xhc3NpYygpKwogICAgICAgICAgICAgICAgdGhlbWUocGxvdC50aXRsZSA9IGVsZW1lbnRfdGV4dChoanVzdD0gMC41KSwKICAgICAgICAgICAgICAgICAgICAgIGF4aXMudGl0bGUgPSBlbGVtZW50X2JsYW5rKCksCiAgICAgICAgICAgICAgICAgICAgICBheGlzLnRpY2tzLnggPSBlbGVtZW50X2JsYW5rKCksCiAgICAgICAgICAgICAgICAgICAgICB0ZXh0ID0gZWxlbWVudF90ZXh0KGZhbWlseSA9ICJDb3VyaWVyIikpCiAgICAgICAgICAgICAgICAgIApnZ3Bsb3RseSh0Zl92aXopCgpgYGAKClZlbW9zIHF1ZSBwYXJhIGxvcyBtZWRpb3MgbcOhcyBtYXNpdm9zIHNlIGN1bXBsZSBsYSBMZXkgZGUgWmlwZjogcG9jYXMKcGFsYWJyYXMgb2N1cnJlbiBtdWNoYXMgdmVjZXMuIExvcyBjb3JwdXMgZGUgQ3LDs25pY2EsIE1pbnV0byBVbm8geSBUw6lsYW0KdGllbmVuIG1lbm9zIHTDqXJtaW5vcyBxdWUgbG9zIGRlbcOhcyB5IGxhIHRmIHRpZW5lIHVuIHJhbmdvIG1lbm9yICh1c28gZGUKcGFsYWJyYXMgbWVqb3IgZGlzdHJpYnVpZG8pLgoKCiMjIyBUZXJtIEZyZXF1ZW5jeSAtIEludmVyc2UgRG9jdW1lbnQgRnJlcXVlbmN5IChURi1JREYpCgpFbiBlc3RhIGV0YXBhIGNvbXBsZW1lbnRhbW9zIGVsIGFuw6FsaXNpcyBjb24gbGFzIG3DqXRyaWNhcyBkZSBpZGYgeQp0Zl9pZGYsIHBhcmEgb2J0ZW5lciB1bmEgbWVkaWRhIG3DoXMgY29tcGxldGEgZGUgbGEgaW1wb3J0YW5jaWEgZGUgbG9zCnTDqXJtaW5vcyBlbiBlbCBjb3JwdXMgZGUgZG9jdW1lbnRvcy4KCmBgYHtyIHRmX2lkZn0KdGZfaWRmIDwtIHdvcmRzX3RpZHkgJT4lIAogIGJpbmRfdGZfaWRmKHdvcmQsIG1lZGlvLCBuKQoKdGZfaWRmICU+JSBzZWxlY3QoLXRvdGFsKSAlPiUgCiAgYXJyYW5nZShkZXNjKHRmX2lkZikpCgojIEVuIGVzdGUgY8OzZGlnbyBjYWxjdWxhbW9zIGxhcyBtw6l0cmljYXMgdGYsIGlkZiB5IHRmX2lkZiBwYXJhIHRvZG9zIGxvcyB0w6lybWlub3MgZGVsIGNvcnB1cwpgYGAKCkNyZWFtb3MgdHJlcyBkYXRhc2V0LCB1bm8gcG9yIG3DqXRyaWNhLCBjb24gZWwgdG9wIHRlbiBkZSB0w6lybWlub3MgcGFyYQpwYXNhcmxlIGEgbGEgZnVuY2nDs24gZGUgdmlzdWFsaXphY2nDs24uCgpgYGB7ciB0b3BfdGVuX21ldHJpY2FzfQp0Zl8xMCA8LSB0Zl9pZGYgJT4lCiAgICAgICAgZ3JvdXBfYnkobWVkaW8pICU+JQogICAgICAgIHNsaWNlX21heCh0ZiwgbiA9IDEwKSAlPiUgCiAgICAgICAgc2VsZWN0KG1lZGlvLCB3b3JkLCB0ZikgJT4lIAogICAgICAgIHJlbmFtZShuID0gdGYpICU+JQogICAgICAgIG11dGF0ZShuID0gbG9nKG4gKyAxKSAqIDEwMCkgJT4lIAogICAgICAgIG11dGF0ZShuID0gcm91bmQobiwgNCkpCgppZGZfMTAgPC0gdGZfaWRmICU+JQogICAgICAgICAgZ3JvdXBfYnkobWVkaW8pICU+JQogICAgICAgICAgYXJyYW5nZShkZXNjKGlkZikpICU+JQogICAgICAgICAgc2xpY2VfaGVhZChuID0gMTApICU+JQogICAgICAgICAgc2VsZWN0KG1lZGlvLCB3b3JkLCBpZGYpICU+JQogICAgICAgICAgcmVuYW1lKG4gPSBpZGYpICU+JQogICAgICAgICAgbXV0YXRlKG4gPSBsb2cobiArIDEpICogMTAwKSAlPiUgCiAgICAgICAgICBtdXRhdGUobiA9IHJvdW5kKG4sIDQpKQoKCnRmX2lkZl8xMCA8LSB0Zl9pZGYgJT4lCiAgICAgICAgZ3JvdXBfYnkobWVkaW8pICU+JQogICAgICAgIGFycmFuZ2UoZGVzYyhpZGYpKSAlPiUKICAgICAgICBzbGljZV9oZWFkKG4gPSAxMCkgJT4lIAogICAgICAgIHNlbGVjdChtZWRpbywgd29yZCwgdGZfaWRmKSAlPiUgCiAgICAgICAgcmVuYW1lKG4gPSB0Zl9pZGYpICU+JQogICAgICAgIG11dGF0ZShuID0gbG9nKG4gKyAxKSAqIDEwMCkgJT4lIAogICAgICAgIG11dGF0ZShuID0gcm91bmQobiwgNCkpCmBgYAoKUGFzYW1vcyBjYWRhIHVubyBkZSBsb3MgdG9wIHRlbiBkZSB0w6lybWlub3MgcG9yIGxhIGZ1bmNpw7NuIGRlIGdyYWZpY2FkbwpwYXJhIHZpc3VhbGl6YXIgbG9zIHTDqXJtaW5vcyBtw6FzIGltcG9ydGFudGVzIHNlZ8O6biBjYWRhIG3DqXRyaWNhLgoKYGBge3IgdGZfdml6fQpjcmVhcl9ncmFmX3dvcmRzKHRmXzEwKQpgYGAKCmBgYHtyIGlkZl92aXp9CmNyZWFyX2dyYWZfd29yZHMoaWRmXzEwKQpgYGAKCmBgYHtyIHRmX2lkZl92aXp9CmNyZWFyX2dyYWZfd29yZHModGZfaWRmXzEwKQpgYGAKCkFuw6FsaXNpcyBwcmVsaW1pbmFyIGRlIFRGLUlERjoKCi0gICBFbiBwcmltZXIgbHVnYXIgaWRlbnRpZmljYW1vcyBsYSBuZWNlc2lkYWQgZGUgYWdyZWdhciBwYWxhYnJhcyBhbAogICAgbGlzdGFkbyBkZSBzdG9wd29yZHMuIEVudGVuZGVtb3MgcXVlIG5vIGFwb3J0YW4gaW5mb3JtYWNpw7NuIHNvYnJlIGVsCiAgICBjb250ZW5pZG8gdSBvcmllbnRhY2nDs24gZGUgbGFzIG5vdGljaWFzIHkgYSBzdSB2ZXogc29uIMO6bmljb3MgcGFyYQogICAgYWxndW5vcyBtZWRpb3MgeSBlc28gZ2VuZXJhIHVuIGFsdG8gdGZfaWRmLgoKICAgIEVqZW1wbG9zOiBqcGUsIGFwLCBlbWosIGNyb25pY2EuY29tLmFyLCBmdmF6cXVleiwgY3JvbmljYXZpcmFsZXMsCiAgICBoZCwgcGVtZXgsIGd0LCBhZnYsIGpwZywgbWludXRvdW5vLmNvbSwgYW1iaXRvLmNvbSwgaXZhbm92aWNoLAogICAgbG9hZGluZywgcGFnaW5haSwgcHJvdGVjdGVkLCBseHMsIGVtYWlsLCByLmMsY3AsIGZlbCxsLmwsZC5zLCBlYSwKICAgIGYuZiwgZi5kLnMsIGZoLCBhLmcsIHBjdCwgdGVsYW0ubGEsIG5hY2lvbmFsLmVsCgotICAgUG9kZW1vcyBpZGVudGlmaWNhciAiZmlybWFzIiBkZSBwZXJpb2Rpc3RhcyAobm9tYnJlcyBkZSB1c3VhcmlvIG8KICAgIHNpZ2xhcykgcXVlIHRhbXBvY28gc29uIGluZm9ybWF0aXZhcyBzb2JyZSBlbCBjb250ZW5pZG8gZGVsIGNvcnB1cy4KCiMjIEV0YXBhIDEuMjogQW1wbGlhY2nDs24gc3RvcHdvcmRzIHkgcmVwcm9jZXNhbWllbnRvIGRlIGxhIGJhc2UKCkVsIGFuw6FsaXNpcyByZWFsaXphZG8gbm9zIHBlcm1pdGnDsyBlbmNvbnRyYXIgbnVtZXJvc2FzIHBhbGFicmFzCmluY2x1aWRhcyBlbiBlbCBjb3JwdXMgcXVlIGNyZWVtb3Mgc29uIHByb2R1Y3RvIGRlbCBzY3JhcHBpbmcuIFByZXZpbyBhCmxhIG1vZGVsaXphY2nDs24gcGFyYSBpZGVudGlmaWNhciB0w7NwaWNvcyBjcmVlbW9zIHBlcnRpbmVudGUgYW1wbGlhciBlbApsaXN0YWRvIGRlIHN0b3B3b3JkcyB5IHJlcGV0aXIgZWwgcHJlcHJvY2VzYW1pZW50byBkZSBsb3MgZGF0b3MuIENPTUVOVEFSSU86IEVOIFJFQUxJREFELCBFU0FTIE5VRVZBUyAiU1RPUFdPUkRTIiBOTyBURU5EUsONQU4gTcOBUyBRVUUgVkVSIENPTiBFTCBIRUNITyBERSBRVUUgU09OIFTDiVJNSU5PUyBNVVkgRVNQRUPDjUZJQ09TIFFVRSBOTyBGSUdVUkFOIEVOIExPUyBESUNDSU9OQVJJT1MgUVVFIFNFIFVTQU4gUEFSQSBMSU1QSUFSIExBUyBTVE9QV09SRFM/IAoKUGFyYSBhbXBsaWFyIGVsIGxpc3RhZG8gZGUgc3RvcHdvcmRzIHBhcnRpbW9zIGRlbCBsaXN0YWRvIGRlIHBhbGFicmFzCmNvbiBzdXMgbcOpdHJpY2FzIGRlIHRmIGUgaWRmLgoKYGBge3Igc3RvcHdvcmRzX3YyfQojIE1lZGlhbnRlIGVsIHNpZ3VpZW50ZSBjw7NkaWdvIGVsaW1pbmFtb3MgcGFsYWJyYXMgcXVlIGluY2x1eWVuIHB1bnRvcyB5IHBhcmVjZW4gcHJvZHVjdG8gZGUgc2NyYXBwaW5nIHdlYi4gQ09NRU5UQVJJTzogQUPDgSBNRSBQRVJEw40gVU4gUE9DTzogRVNUQSBMSU1QSUVaQSBERSBQVU5UT1MgTk8gRVNUQUJBIEhFQ0hBIEVOIExPUyBQUklNRVJPUyBQQVNPUyBERUwgVFA/Cm51ZXZhc19zdG9wd29yZHNfMSA8LSB0Zl9pZGYgJT4lIAogIHNlbGVjdCh3b3JkKSAlPiUgCiAgZmlsdGVyKGdyZXBsKCdcXC4nLCB3b3JkKSkgJT4lIAogIHB1bGwod29yZCkKCiMgRW4gZXN0ZSBwYXNvIGVsaW1pbmFtb3MgcGFsYWJyYXMgZGUgZG9zIGNhcmFjdGVyZXMsIHNhbHZvIGNvbnRhZGFzIGV4Y2VwY2lvbmVzIHF1ZSB0aWVuZW4gc2VudGlkby4KbnVldmFzX3N0b3B3b3Jkc18yIDwtIHRmX2lkZiAlPiUgCiAgc2VsZWN0KHdvcmQpICU+JSAKICBmaWx0ZXIoc3RyX2xlbmd0aCh3b3JkKSA9PSAyICYgISh3b3JkICVpbiUgYygncGonLCAnZmUnLCAnZHQnLCAndHYnLCAna20nLCAnY3YnLCAnZHInLCAnaXQnLCAnZGonLCAndXgnKSkpICU+JSAKICBwdWxsKHdvcmQpCgojIEVzdGUgY8OzZGlnbyBlbGltaW5hIHBhbGFicmFzIGRlIHRyZXMgY2FyYWN0ZXJlcy4gUGFyZWNlIGhhYmVyIG3DoXMgc2lnbGFzIHkgcGFsYWJyYXMgY29ydGFzIHF1ZSB0aWVuZW4gc2VudGlkbyBwZXJvLCBkYWRhIGxhIGdyYW4gY2FudGlkYWQgZGUgc3RvcHdvcmRzIGRlIDMgY2FyYWN0ZXJlcywgaGF5IG1vdGl2b3MgcGFyYSBpbmNsdWlyIGVzdGUgcGFzby4KbnVldmFzX3N0b3B3b3Jkc18zIDwtIHRmX2lkZiAlPiUgCiAgc2VsZWN0KHdvcmQpICU+JSAKICBmaWx0ZXIoc3RyX2xlbmd0aCh3b3JkKSA9PSAzICYgISh3b3JkICVpbiUgYygnc2FuJywgJ21pbCcsICdsZXknLCAnYWZwJywgJ3N1cicsICdmbWknLCAndXNkJywgJ3JpbycsICdnb2wnLCAncGF6JywgJ21hcicsICdvcm8nLCAncmVkJywgJ2x1eicsICd2b3onICwgJ3JvbCcsICdzb2wnLCAnZ2FzJywgJ3BpZScsICdwYXInLCAncHJvJywgJ3ZpYScsICdvbnUnLCAneXBmJywgJ2l2YScsICdhZmEnLCAncGJpJywgJ2JhcicsICdjZmsnLCAnZWplJywgJ3JleScsICdhdHAnLCAnZG9uJywgJ2ZiaScsICdnYXknLCAncHNnJywgJ3ViYScsICd1Y3InLCAnY2VvJywgJ29uZycsICdmZWQnLCAnb2pvJywgJ2RlYScsICd1dmEnLCAnY2d0JywgJ3VmaScsICdhcHAnLCAnZ2lsJywgJ3ZpaCcsICduYmEnLCAnYmJjJywgJ2V2bycsICdoaXAnLCAnaG9wJywgJ2ZveCcsICduYmMnLCAncmFwJywgJ2FkbicsICdhbGEnLCAnZXZhJywgJ3BhbicsICd6ZW4nLCAnYWZ2JywgJ2NjaycsICdlY28nLCAnb2NhJywgJ3RpbycsICdjbm4nLCAnY2lhJywgImRuaSIsICJ1aWEiLCAiZmR0IiwgInVpZiIsICJoYm8iLCAibWxzIiwgIm9lYSIsICJtZXAiLCAiZ25jIiwgImF1aCIsICJjaGUiLCAib2lsIiwgImdlbiIsICJhZ24iLAkiZnB2IiwgImxhbSIsCSJwaWIiLCAiY25lIiwiZHVvIiwgInZveCIsICJkb3ciLCAidWNhIiwgImRudSIsICJwZXoiLCAicGZhIiwgInBkdCIsICJmZGEiLCAiZmNpIiwgIm9tcyIsICJwc2EiLCAiZmVvIiwgImN0YSIsICJlZ28iLAkJCQkKImZhYSIsCSJ1dGUiLCAiYXRlIiwJImxpbyIsICJmcHQiLCAic3V2IiwgImdiYSIsCSJpenEiLCAiYXJvIiwgInNtbiIsICJ0bnQiLAkidWNvIiwgImlwYyIsICJzYWEiLCAidG16IiwgImNjbCIsICJnZWwiLCAidmlwIiwgImVzaSIsCSJyZXMiLCAia3VuIiwgInRzaiIsICJhZmkiLAkicHRzIiwgImNuaCIsICJham8iLCAiYWN2IiwgImJtdyIsICJidXMiLCAiZ3BzIiwgImlsZSIsCSJpb3MiLCAidW5jIiwJInpvbyIsICJqdXAiLCAidG9zIiwgInVubCIsCSJ1cGwiLCAiemVvIiwgImF2ZSIsICJtdGUiLCAibXBuIiwgImFwbiIsICJtYW8iLCAicGJhIiwgInNtcyIsICJjbnYiLCAibWR6IiwgImZvbCIsICJpc28iKSkpICU+JSAKICBwdWxsKHdvcmQpCgpudWV2YXNfc3RvcHdvcmRzIDwtIGRhdGEuZnJhbWUod29yZCA9IG51ZXZhc19zdG9wd29yZHNfMSkgJT4lIAogIGJpbmRfcm93cyhkYXRhLmZyYW1lKHdvcmQgPSBudWV2YXNfc3RvcHdvcmRzXzIpKSAlPiUgCiAgYmluZF9yb3dzKGRhdGEuZnJhbWUod29yZCA9IG51ZXZhc19zdG9wd29yZHNfMykpCgpzdG9wX3dvcmRzX2Z1bGxfdjIgPC0gc3RvcF93b3Jkc19mdWxsICU+JSAKICBiaW5kX3Jvd3ModGliYmxlKHdvcmQgPSBjKCdlbWJlZCcsICdhbmlvJywgJ2FubycsICdhbm9zJywgJ2d1c3RhJywgJ3R3aXR0ZXInLCAnZmFjZWJvb2snLCAnY29tZW50YXInLCAnZnVlbnRlJywgJ3doYXRzYXBwJywgJ2d1YXJkYXInLCAnY29tcGFydGlyJywgJ21haWwnLCAnbG9hZGluZycsICdlbWFpbCcsICdwYWdpbmFpJywgJ2VsdHJlY2UnLCAnaW5mb2JhZScgKSkpICU+JSAKICBiaW5kX3Jvd3MobnVldmFzX3N0b3B3b3JkcykKYGBgCgpBIHBhcnRpciBkZSBsYSBudWV2YSBsaXN0YSBkZSBzdG9wd29yZHMsIHJlY3JlYW1vcyBlbCBjb3JwdXMgZW4gZm9ybWF0bwp0aWR5IHkgdGFtYmnDqW4gZWwgZGF0YWZyYW1lIGVuIGZvcm1hdG8gbWVkaW8vdMOpcm1pbm8vbiBwYXJhIGNvbnRpbnVhcgpjb24gZWwgYW7DoWxpc2lzIGRlIG3DqXRyaWNhcy4KCmBgYHtyIGNvcnB1c190aWR5X3YyfQpjb3JwdXNfdGlkeV92MiA8LSBjb3JwdXNfdGlkeSAlPiUgCiAgYW50aV9qb2luKHN0b3Bfd29yZHNfZnVsbF92MikKYGBgCgpgYGB7ciB3b3Jkc190aWR5X3YyfQp3b3Jkc190aWR5X3YyIDwtIGNvcnB1c190aWR5X3YyICU+JSAKICBncm91cF9ieShtZWRpbywgd29yZCkgJT4lCiAgc3VtbWFyaXNlKG49bigpKQoKdG90YWxfd29yZHNfdjIgPC0gd29yZHNfdGlkeV92MiAlPiUKICAgICAgICBncm91cF9ieShtZWRpbykgJT4lCiAgICAgICAgc3VtbWFyaXplKHRvdGFsID0gc3VtKG4pKSAKCndvcmRzX3RpZHlfdjIgPC0gd29yZHNfdGlkeV92MiAlPiUgCiAgbGVmdF9qb2luKHRvdGFsX3dvcmRzX3YyKSAlPiUgCiAgdW5ncm91cCgpICU+JSAKICBhcnJhbmdlKGRlc2MobikpCmBgYAoKIyMjIFJldmlzacOzbiBkZSBtw6l0cmljYXMKCkNyZWFtb3MgZWwgZ3LDoWZpY28gY29uIGxhIGRpc3RyaWJ1Y2nDs24gZGUgdMOpcm1pbm9zIHNlZ8O6biBzdSB0ZiBwYXJhCmlkZW50aWZpY2FyIHZhcmlhY2lvbmVzIHJlc3BlY3RvIGEgbGEgdjEuCgpgYGB7ciB0Zl92aXpfbWFudWFsX3YyfQp0Zl92aXpfdjIgPC0gd29yZHNfdGlkeV92MiAlPiUgbXV0YXRlKHRmID0gbi90b3RhbCkgJT4lCiAgICAgICAgICBnZ3Bsb3QoYWVzKHRmKSkgKwogICAgICAgICAgICAgICAgZ2VvbV9oaXN0b2dyYW0oc2hvdy5sZWdlbmQgPSBGQUxTRSkgKwogICAgICAgICAgICAgICAgY29vcmRfZmxpcCgpKwogICAgICAgICAgICAgICAgeGxpbShOQSwgMC4wMDAyKSArCiAgICAgICAgICAgICAgICBmYWNldF93cmFwKH5tZWRpbykgKwogICAgICAgICAgICAgICAgdGhlbWVfY2xhc3NpYygpKwogICAgICAgICAgICAgICAgdGhlbWUocGxvdC50aXRsZSA9IGVsZW1lbnRfdGV4dChoanVzdD0gMC41KSwKICAgICAgICAgICAgICAgICAgICAgIGF4aXMudGl0bGUgPSBlbGVtZW50X2JsYW5rKCksCiAgICAgICAgICAgICAgICAgICAgICBheGlzLnRpY2tzLnggPSBlbGVtZW50X2JsYW5rKCksCiAgICAgICAgICAgICAgICAgICAgICB0ZXh0ID0gZWxlbWVudF90ZXh0KGZhbWlseSA9ICJDb3VyaWVyIikpCiAgICAgICAgICAgICAgICAgIApnZ3Bsb3RseSh0Zl92aXpfdjIpCmBgYAoKKi1cPiBmYWx0YSBjb21wYXJhciB5IGFuw6FsaXNpcyByZXNwZWN0byBhIHRmIGVuIHYxLiBDb21wYXJhciBjdcOhbnRvcwp0ZXJtaW5vcyBjYWVuIGVuIGxhIHRmIG3DoXMgY2VyY2FuYSBhIDAgKHRlcm1pbm9zIGNvbiBiYWphIGltcG9ydGFuY2lhIGVuCmVsIGNvcnB1cykuIEEgc3UgdmV6LCBhbCBxdWl0YXIgbcOhcyBzdG9wd29yZHMgZGViZXLDrWFtb3MgdmVyIG1lbm9zCnTDqXJtaW5vcyBjYXllbmRvIGVuIGxhcyB0ZiBtw6FzIGFsdGFzIHBvciBzZXIgcGFsYWJyYXMgcmFuZG9tIHF1ZQphcGFyZWNlbiBwb2NhcyB2ZWNlcyBlbiBlbCBjb3JwdXMqCgojIE5vIHNlIG9ic2VydmFuIHZhcmlhY2lvbmVzIHNpZ25pZmljYXRpdmFzIGVudHJlIHYxIHkgdjIgKEVTVE8gTE8gRElHTyBBIE9KTywgTUlSQU5ETyBMT1MgRE9TIEdSw4FGSUNPUzsgQUPDgSBZQSBNRSBQRVJEw40gQkFTVEFOVEUgQ09OIEVMIFBMQU5URU8gREUgUkVDT1JURSBERSBMQVMgU1RPUFdPUkRTKS4KCmBgYHtyIHRmX2lkZl92Mn0KdGZfaWRmX3YyIDwtIHdvcmRzX3RpZHlfdjIgJT4lIAogIGJpbmRfdGZfaWRmKHdvcmQsIG1lZGlvLCBuKQoKdGZfaWRmX3YyICU+JSAKICBhcnJhbmdlKGRlc2ModGZfaWRmKSkgJT4lIAogIHNlbGVjdCh3b3JkKSAlPiUgCiAgZGlzdGluY3QoKQpgYGAKCkNyZWFtb3MgbG9zIGRhdGFzZXQgbmVjZXNhcmlvcyBwYXJhIHZpc3VhbGl6YXIgbG9zIHByaW5jaXBhbGVzIHTDqXJtaW5vcwpwb3IgbcOpdHJpY2EgeSBwb3IgbWVkaW8sIGJ1c2NhbmRvIGRpZmVyZW5jaWFzIHJlc3BlY3RvIGEgbGEgdjEuCgpgYGB7ciB0b3BfdGVuX21ldHJpY2FzX3YyfQp0Zl8xMF92MiA8LSB0Zl9pZGZfdjIgJT4lCiAgICAgICAgZ3JvdXBfYnkobWVkaW8pICU+JQogICAgICAgIHNsaWNlX21heCh0ZiwgbiA9IDEwKSAlPiUgCiAgICAgICAgc2VsZWN0KG1lZGlvLCB3b3JkLCB0ZikgJT4lIAogICAgICAgIHJlbmFtZShuID0gdGYpICU+JQogICAgICAgIG11dGF0ZShuID0gbG9nKG4gKyAxKSAqIDEwMCkgJT4lIAogICAgICAgIG11dGF0ZShuID0gcm91bmQobiwgNCkpCgppZGZfMTBfdjIgPC0gdGZfaWRmX3YyICU+JQogICAgICAgICAgZ3JvdXBfYnkobWVkaW8pICU+JQogICAgICAgICAgYXJyYW5nZShkZXNjKGlkZikpICU+JQogICAgICAgICAgc2xpY2VfaGVhZChuID0gMTApICU+JQogICAgICAgICAgc2VsZWN0KG1lZGlvLCB3b3JkLCBpZGYpICU+JQogICAgICAgICAgcmVuYW1lKG4gPSBpZGYpICU+JQogICAgICAgICAgbXV0YXRlKG4gPSBsb2cobiArIDEpICogMTAwKSAlPiUgCiAgICAgICAgICBtdXRhdGUobiA9IHJvdW5kKG4sIDQpKQoKCnRmX2lkZl8xMF92MiA8LSB0Zl9pZGZfdjIgJT4lCiAgICAgICAgZ3JvdXBfYnkobWVkaW8pICU+JQogICAgICAgIGFycmFuZ2UoZGVzYyhpZGYpKSAlPiUKICAgICAgICBzbGljZV9oZWFkKG4gPSAxMCkgJT4lIAogICAgICAgIHNlbGVjdChtZWRpbywgd29yZCwgdGZfaWRmKSAlPiUgCiAgICAgICAgcmVuYW1lKG4gPSB0Zl9pZGYpICU+JQogICAgICAgIG11dGF0ZShuID0gbG9nKG4gKyAxKSAqIDEwMCkgJT4lIAogICAgICAgIG11dGF0ZShuID0gcm91bmQobiwgNCkpCmBgYAoKYGBge3IgdGZfdml6X3YyfQpjcmVhcl9ncmFmX3dvcmRzKHRmXzEwX3YyKQpgYGAKCmBgYHtyIGlkZl92aXpfdjJ9CmNyZWFyX2dyYWZfd29yZHMoaWRmXzEwX3YyKQpgYGAKCmBgYHtyIHRmX2lkZl92aXpfdjJ9CmNyZWFyX2dyYWZfd29yZHModGZfaWRmXzEwX3YyKQpgYGAKCkFuw6FsaXNpcyBmaW5hbCBkZSBURi1JREY6CgoqQ29tcGFyYXIgY29uIGFuw6FsaXNpcyBhbnRlcmlvciB5IHZhbGlkYXIgc2kgZXN0YW1vcyBvayBjb24gbG9zIHTDqXJtaW5vcwptw6FzIGltcG9ydGFudGVzIGRlbCBjb3JwdXMgcGFyYSBlbXBlemFyIGNvbiBsYSBkZXRlY2Npw7NuIGRlIHTDs3BpY29zLiBBCnNpbXBsZSB2aXN0YSBwYXJlY2UgcXVlIHRvZGF2w61hIHBvZGVtb3MgbGltcGlhciBhbGd1bmFzIHBhbGFicmFzIG3DoXMsCmluY2x1eWVuZG9sYXMgZW4gZWwgbGlzdGFkbyBkZSBzdG9wd29yZHMgYW1wbGlhZG8uKgoKLSAgIEVuIHRvZG9zIGxvcyBtZWRpb3MsIGV4Y2VwdG8gZW4gTGEgTmFjacOzbiBxdWUgbm8gbGEgaW5jbHXDrWEsIGxvZ3LDsyBlbGltaW5hcnNlIGxhIHBhbGFicmEgImFuaW8iIHF1ZSBmaWd1cmFiYSBlbiBlbCBwcmltZXIgbHVnYXIgZW4gdMOpcm1pbm9zIGRlIGZyZWN1ZW5jaWEuIEFkZW3DoXMsIGVuIGxvcyBjYXNvcyBkZSBDcsOzbmljYSB5IE1pbnV0byAxLCBzZSBlbGltaW7DsyBvdHJhIHBhbGFicmEgYWRpY2lvbmFsIGluY29ycG9yYW5kbywgZGUgZXNhIG1hbmVyYSwgZG9zIG51ZXZhcyBhbCB0b3AgZGllei4gCgotIEVsIGNhc28gZGUgTGEgTmFjacOzbiB5YSBzZSBtdWVzdHJhIG5vcm1hbGl6YWRvLCBzaW4gbGFzIHN0b3B3b3JkcyBxdWUgYXBhcmVjw61hbiBwcm9kdWN0byBkZWwgc2NyYXBpbmcuCgotIEVTVE8gRVMgUEFSQSBSRVZJU0FSOiBFbiBlbCBjb250ZW8gZGUgSW5mb2JhZSBkZSBsYSB2MiBhcGFyZWNlbiAxMSBwYWxhYnJhcyBlbiB2ZXogZGUgMTAuCgotLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0KIyMgTW9kZWxhZG8gZGUgdMOzcGljb3M6IExEQQoKwr9DdcOhbGVzIHNvbiBsb3MgdMOzcGljb3MgcHJpbmNpcGFsZXMgZW4gZWwgY29ycHVzPyDCv1B1ZWRlbiBldmlkZW5jaWFyCmRpZmVyZW5jaWFzIGVuIGNhZGEgdW5vIGRlIGxvcyBtZWRpb3M/IEV4cGxpY2FyIHF1w6kgbcOpdG9kbyBzZSB1dGlsaXrDswpwYXJhIHJlc3BvbmRlciBsYSBwcmVndW50YSwgY3XDoWxlcyBzb24gbG9zIHN1cHVlc3RvcyBkZWwgbWlzbW8uIEdlbmVyYXIKbGFzIHZpc3VhbGl6YWNpb25lcyBtw6FzIGFkZWN1YWRhcyBwYXJhIHJlc3BvbmRlciBhIGxhcyBwcmVndW50YXMuCgpQYXJhIGltcGxlbWVudGFyIHVuIG1vZGVsYWRvIGRlIHRlbWFzIGNvbiBMREEgbmVjZXNpdGFtb3MgY29uc3RydWlyIHVuYSBtYXRyaXogRFRNLgpgYGB7ciBkdG19CmRpc2NfZHRtIDwtIHdvcmRzX3RpZHlfdjIgJT4lCiAgICAgICAgICAgICAgICBjYXN0X2R0bShtZWRpbywgd29yZCwgbikKCmRpc2NfZHRtCmBgYAoKYGBge3J9CmxkYV81IDwtIExEQShkaXNjX2R0bSwgayA9IDUsIGNvbnRyb2wgPSBsaXN0KHNlZWQgPSAxMjM0KSkgICMgayBlcyBlbCBuw7ptZXJvIGRlIHTDs3BpY29zIGEgaWRlbnRpZmljYXIKCmFwX3RvcGljcyA8LSB0aWR5KGxkYV81LCBtYXRyaXggPSAiYmV0YSIpIAoKYXBfdG9waWNzICU+JQogIG11dGF0ZShiZXRhID0gcm91bmQoMTAwKmJldGEsNikpCgphcF90b3BfdGVybXMgPC0gYXBfdG9waWNzICU+JQogIGdyb3VwX2J5KHRvcGljKSAlPiUKICBzbGljZV9tYXgoYmV0YSwgbiA9IDE1KSAlPiUgCiAgdW5ncm91cCgpICU+JQogIGFycmFuZ2UodG9waWMsIC1iZXRhKQoKYXBfdG9wX3Rlcm1zICU+JQogIG11dGF0ZSh0ZXJtID0gcmVvcmRlcl93aXRoaW4odGVybSwgYmV0YSwgdG9waWMpKSAlPiUKICBnZ3Bsb3QoYWVzKGJldGEsIHRlcm0sIGZpbGwgPSBmYWN0b3IodG9waWMpKSkgKwogIGdlb21fY29sKHNob3cubGVnZW5kID0gRkFMU0UpICsKICBmYWNldF93cmFwKH4gdG9waWMsIHNjYWxlcz0nZnJlZV95JykgKwogIHNjYWxlX3lfcmVvcmRlcmVkKCkgKwogIHRoZW1lX21pbmltYWwoKQpgYGAKYGBge3J9CmxkYV8xMCA8LSBMREEoZGlzY19kdG0sIGsgPSAxMCwgY29udHJvbCA9IGxpc3Qoc2VlZCA9IDEyMzQpKSAgCgphcF90b3BpY3MgPC0gdGlkeShsZGFfMTAsIG1hdHJpeCA9ICJiZXRhIikgCgphcF90b3BpY3MgJT4lCiAgbXV0YXRlKGJldGEgPSByb3VuZCgxMDAqYmV0YSw2KSkKCmFwX3RvcF90ZXJtcyA8LSBhcF90b3BpY3MgJT4lCiAgZ3JvdXBfYnkodG9waWMpICU+JQogIHNsaWNlX21heChiZXRhLCBuID0gMTApICU+JSAKICB1bmdyb3VwKCkgJT4lCiAgYXJyYW5nZSh0b3BpYywgLWJldGEpCgphcF90b3BfdGVybXMgJT4lCiAgbXV0YXRlKHRlcm0gPSByZW9yZGVyX3dpdGhpbih0ZXJtLCBiZXRhLCB0b3BpYykpICU+JQogIGdncGxvdChhZXMoYmV0YSwgdGVybSwgZmlsbCA9IGZhY3Rvcih0b3BpYykpKSArCiAgZ2VvbV9jb2woc2hvdy5sZWdlbmQgPSBGQUxTRSkgKwogIGZhY2V0X3dyYXAofiB0b3BpYywgc2NhbGVzPSdmcmVlX3knKSArCiAgc2NhbGVfeV9yZW9yZGVyZWQoKSArCiAgdGhlbWVfbWluaW1hbCgpCmBgYAoKUGFyZWNpZXJhIHF1ZSBsYXMgcHJ1ZWJhcyB0YW50byBjb24gY2luY28gY29tbyBjb24gZGlleiB0w7NwaWNvcyBubyByZWZsZWphbiB1biBzZW50aWRvIHRhbiBkZWZpbmlkby4gTGFzIGRvcyB2aXN1YWxpemFjaW9uZXMgYW50ZXJpb3JlcyBtdWVzdHJhbiBxdWUgYWxndW5hcyBwYWxhYnJhcyBjb21vICJnb2JpZXJubyIsICJwcmVzaWRlbnRlIiwgImZlcm5hbmRleiIsIGVudHJlIG90cmFzLCBzb24gY29tdW5lcyBhIG3DoXMgZGUgdW4gdGVtYS4gRXMgZGVjaXIsIHF1ZSBsb3MgdMOzcGljb3MgaWRlbnRpZmljYWRvcyB0aWVuZW4gY2llcnRhIHN1cGVycG9zaWNpw7NuIGVuIHTDqXJtaW5vcyBkZSBwYWxhYnJhcy4gRXN0byBwb2Ryw61hIGRlYmVyc2UgYSBxdWUgbG9zIGRvY3VtZW50b3MgZW4gZWwgY29ycHVzIHRyYXRhbiBzb2JyZSB0ZW1hcyByZWxhY2lvbmFkb3MgbyB0aWVuZW4gdW4gY29udGVuaWRvIHNpbWlsYXIuIENvbW8gYWx0ZXJuYXRpdmEsIHBvZHLDrWFtb3MgY29uc2lkZXJhciBsb3MgdMOpcm1pbm9zIHF1ZSB0dXZpZXJhbiBsYSBtYXlvciBkaWZlcmVuY2lhIGVuIM6yIGVudHJlIHRvZG9zIGxvcyB0ZW1hcy4KCmBgYHtyfQoKIyBFU1RPIE5PIFPDiSBTSSBFU1TDgSBCSUVOIEFQTElDQURPLCBFTiBMQSBOT1RFQk9PSyBFTCBDQVNPIEVSQSBBTEdPIERJU1RJTlRPLiBTRSBDQUxDVUxBQkEgU09CUkUgTE9TIFTDk1BJQ09TIE3DgVMgREVGSU5JRE9TLCBQRVJPIEVOIE5VRVNUUk8gQ0FTTyBOSU5HVU5PIEVTIERFRklOSURPLgoKIyBDb24gZXN0ZSBjw7NkaWdvIGNhbGN1bGFtb3MgZWwgbG9nYXJpdG1vIGRlIGxhIHByb3BvcmNpw7NuIGRlIGNhZGEgdMOzcGljbyByZXNwZWN0byBhbCB0w7NwaWNvIGRlIHJlZmVyZW5jaWEgcGFyYSBsb3MgY2luY28gdMOzcGljb3MgZGVsIGNvbmp1bnRvIGRlIGRhdG9zLiBDYWRhIGNvbHVtbmEgbG9nX3JhdGlvIHJlcHJlc2VudGEgbGEgZGlmZXJlbmNpYSBsb2dhcsOtdG1pY2EgZW50cmUgbG9zIHTDs3BpY29zIGFkeWFjZW50ZXMuIEVzdG8gcHJvcG9yY2lvbmEgaW5mb3JtYWNpw7NuIHNvYnJlIGPDs21vIGNhbWJpYSBsYSBjb250cmlidWNpw7NuIHJlbGF0aXZhIGRlIGNhZGEgdMOzcGljbyBlbiBjb21wYXJhY2nDs24gY29uIHN1IHTDs3BpY28gYWR5YWNlbnRlLgoKYmV0YV93aWRlMyA8LSBhcF90b3BpY3MgJT4lCiAgbXV0YXRlKHRvcGljID0gcGFzdGUwKCJ0b3BpYyIsIHRvcGljKSkgJT4lCiAgcGl2b3Rfd2lkZXIobmFtZXNfZnJvbSA9IHRvcGljLCB2YWx1ZXNfZnJvbSA9IGJldGEpICU+JQogIGZpbHRlcih0b3BpYzEgPiAwLjAwMiB8IHRvcGljMiA+IDAuMDAyIHwgdG9waWMzID4gMC4wMDIgfCB0b3BpYzQgPiAwLjAwMiB8IHRvcGljNSA+IDAuMDAyKSAlPiUgICMgRmlsdHJvIHBhcmEgZWxpbWluYXIgdmFsb3JlcyBtdXkgYmFqb3MKICBtdXRhdGUobG9nX3JhdGlvMV8yID0gbG9nMih0b3BpYzIgLyB0b3BpYzEpLAogICAgICAgICBsb2dfcmF0aW8yXzMgPSBsb2cyKHRvcGljMyAvIHRvcGljMiksCiAgICAgICAgIGxvZ19yYXRpbzNfNCA9IGxvZzIodG9waWM0IC8gdG9waWMzKSwKICAgICAgICAgbG9nX3JhdGlvNF81ID0gbG9nMih0b3BpYzUgLyB0b3BpYzQpLAogICAgICAgICBsb2dfcmF0aW81XzEgPSBsb2cyKHRvcGljMSAvIHRvcGljNSkpCgpiZXRhX3dpZGUzCmBgYApgYGB7cn0KYmV0YV93aWRlMyAlPiUKICBnZ3Bsb3QoYWVzKHg9cmVvcmRlcih0ZXJtLGxvZ19yYXRpbzFfMikgLCB5PWxvZ19yYXRpbzFfMikpICsKICAgIGdlb21fY29sKCkgKwogICAgY29vcmRfZmxpcCgpICsKICAgIGxhYnMoeD0nVMOpcm1pbm8nLAogICAgICAgICB5PSdMb2cyIHJhdGlvIHRvcGljMy90b3BpYzInKSArCiAgICB0aGVtZV9taW5pbWFsKCkKYGBgCgpgYGB7cn0KYmV0YV93aWRlMyAlPiUKICBnZ3Bsb3QoYWVzKHg9cmVvcmRlcih0ZXJtLGxvZ19yYXRpbzJfMykgLCB5PWxvZ19yYXRpbzJfMykpICsKICAgIGdlb21fY29sKCkgKwogICAgY29vcmRfZmxpcCgpICsKICAgIGxhYnMoeD0nVMOpcm1pbm8nLAogICAgICAgICB5PSdMb2cyIHJhdGlvIHRvcGljMi90b3BpYzEnKSArCiAgICB0aGVtZV9taW5pbWFsKCkKYGBgCmBgYHtyfQpiZXRhX3dpZGUzICU+JQogIGdncGxvdChhZXMoeD1yZW9yZGVyKHRlcm0sbG9nX3JhdGlvM180KSAsIHk9bG9nX3JhdGlvM180KSkgKwogICAgZ2VvbV9jb2woKSArCiAgICBjb29yZF9mbGlwKCkgKwogICAgbGFicyh4PSdUw6lybWlubycsCiAgICAgICAgIHk9J0xvZzIgcmF0aW8gdG9waWM0L3RvcGljMycpICsKICAgIHRoZW1lX21pbmltYWwoKQpgYGAKYGBge3J9CmJldGFfd2lkZTMgJT4lCiAgZ2dwbG90KGFlcyh4PXJlb3JkZXIodGVybSxsb2dfcmF0aW80XzUpICwgeT1sb2dfcmF0aW80XzUpKSArCiAgICBnZW9tX2NvbCgpICsKICAgIGNvb3JkX2ZsaXAoKSArCiAgICBsYWJzKHg9J1TDqXJtaW5vJywKICAgICAgICAgeT0nTG9nMiByYXRpbyB0b3BpYzUvdG9waWM0JykgKwogICAgdGhlbWVfbWluaW1hbCgpCmBgYAoKYGBge3J9CmJldGFfd2lkZTMgJT4lCiAgZ2dwbG90KGFlcyh4PXJlb3JkZXIodGVybSwgbG9nX3JhdGlvNV8xKSAsIHk9IGxvZ19yYXRpbzVfMSkpICsKICAgIGdlb21fY29sKCkgKwogICAgY29vcmRfZmxpcCgpICsKICAgIGxhYnMoeD0nVMOpcm1pbm8nLAogICAgICAgICB5PSdMb2cyIHJhdGlvIHRvcGljMS90b3BpYzUnKSArCiAgICB0aGVtZV9taW5pbWFsKCkKYGBgCmBgYAojIyBNb2RlbGFkbyBkZSB0w7NwaWNvczogU1RNCgpQYXJhIGltcGxlbWVudGFyIHVuIG1vZGVsYWRvIGRlIHRlbWFzIGNvbiBTVE0gbmVjZXNpdGFtb3MgY29uc3RydWlyIHVuYSBtYXRyaXogREZNLgpgYGB7ciBkZm19CmRpc2NfZGZtIDwtIHdvcmRzX3RpZHlfdjIgJT4lCiAgICAgICAgICAgICAgICBjYXN0X2RmbShtZWRpbywgd29yZCwgbikKCmRpc2NfZGZtCmBgYAoKCi0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLS0tLQoKQSBjb250aW51YWNpw7NuLCBzZWxlY2Npb25hciBsYXMgbm90aWNpYXMgdmluY3VsYWRhcyBhIGFsZ8O6biB0w7NwaWNvCnJlbGV2YW50ZSAocG9yIGVqZW1wbG8sIOKAnEVsZWNjaW9uZXPigJ0pIHkgY29uc3RydWlyIHVuIGNsYXNpZmljYWRvciBwYXJhCnByZWRlY2lyIGxhIG9yaWVudGFjacOzbiBkZWwgZGlhcmlvLiBVdGlsaXphciBhbGd1bm8gZGUgbG9zIG1vZGVsb3MgZGUKY2xhc2lmaWNhY2nDs24gdmlzdG9zIGEgbG8gbGFyZ28gZGUgYWwgRGlwbG9tYXR1cmEgKHJlZ3Jlc2nDs24gbG9nw61zdGljYSwKcmFuZG9tIGZvcmVzdCwgZXRjLikuIFV0aWxpemFyIGNvbW8gZmVhdHVyZXMgZWwg4oCcU3BhbmlzaCBCaWxsaW9uIFdvcmQKQ29ycHVzIGFuZCBFbWJlZGRpbmdz4oCdLCBhbmFsaXphZG8gZW4gY2xhc2UgKHB1ZWRlbiBkZXNjYXJnYXIgZWwKZW1iZWRkaW5nIGVuIGZvcm1hdG8gLmJpbiBkZWwgbGluaykuIMK/UXXDqSByZXN1bHRhZG9zIGFycm9qYSBlbCBtb2RlbG8/CsK/RXMgcG9zaWJsZSBtZWRpYW50ZSBlbCB0ZXh0byBkZSBsYXMgbm90aWNpYXMgY29ub2NlciBsYSBsw61uZWEgZWRpdG9yaWFsCmRlbCBkaWFyaW8/IEdlbmVyYXIgbGFzIHZpc3VhbGl6YWNpb25lcyB5IHRhYmxhcyBjb3JyZXNwb25kaWVudGVzIHBhcmEKdW5hIGNvcnJlY3RhIGV2YWx1YWNpw7NuIGRlbCBtb2RlbG8uCg==